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本 教材 是 初等 概率 论 与 随机 过 程 的 一 个 引 论 . 特别 适用 于 这 样 的 人 群 : 他 们 想 
要 知道 如 何 用 概率 论 研究 诸如 工程 、 计算 机 科学 、 管 理科 学 、 物 理 和 社会 科学 以 及 
运筹 学 等 领域 中 的 种 种 现象. 

大 家 普遍 地 感觉 到 , 学 习 概率 论 有 两 种 方法 . 一 种 是 直观 而 不 严格 的 方法 , 其 
意图 是 培养 学 生 对 学 科 的 直观 感觉 , 以 使 其 能 “从 概率 论 角度 思考 ”. 另 一 种 方法 试 
图 用 测度 论 工具 严格 地 研究 概率 论 . 本 教材 用 的 是 第 一 种 方法 . 然而 , 因为 能 “从 概 
率 论 角度 思考 ”对 概率 论 的 理解 与 应 用 都 极为 重要 , 所 以 本 教材 对 于 那些 主要 对 第 
二 种 方法 感 兴趣 的 学 生 也 是 有 用 的 . 


叫 


这 一 版 更 新 的 内 容 


第 11 版 包含 有 新 的 课文 材料 、 新 的 例子 和 习题 . 新 的 例子 主要 有 如 下 内 容 . 

。 例 3.6, 给 出 了 +- 随机 变量 分 布 密度 的 推导 . 

。 例 3.32, 分 析 了 发 球 和 对 打 比 赛 , 此 处 对 打 的 胜 者 是 下 一 个 点 的 发 球 者 . 

。 例 5.19, 考虑 了 不 准 超车 的 单车 道 公路 . 

。 例 6.22, 用 逆向 链 来 分 析 串 联 排队 系统 . 

。 例 7.20 分 析 了 一 种 系统 , 其 中 人 员 和 公车 两 者 都 随机 地 到 达 车 站 . 

新 的 章节 如 下 . 

。 4.4 节 , 有 关 马 尔 可 夫 链 的 长 程 比例 和 极限 概率 . 

。 5.5 节 , 有 关 随机 强度 函数 和 Hawkes 过 程 . 

。 6.7 节 , 有 关连 续 时 间 马 尔 可 夫 链 的 逆向 链 - 

。 10.5 节 , 分 析 了 漂移 布朗 运动 的 最 大 值 . 

我 们 也 尽 可 能 地 简化 现存 的 素材 . 例子 包括 了 非 时 齐 泊 松 过 程 在 一 个 时 间 区 间 
中 发 生 的 事件 数 是 泊 松 分 布 的 一 个 新 证 明 , 引入 瓦尔 德 方程 (定理 7.2) 和 随后 用 于 
证 明 初等 更 新 定理 . 


课 程 


理想 状态 下 , 本 教材 可 用 于 一 年 的 概率 模型 课程 . 其 他 可 能 的 课程 是 一 学 期 的 
概率 论 引 论 (包括 1~3 章 及 其 他 章 的 部 分 内 容 ) 或 初等 随机 过 程 课程 . 本 教材 设计 
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得 足够 灵活 , 以 便 能 适用 于 各 种 可 能 的 课程 . 例如 , 我 曾 用 第 5 章 与 第 8 章 , 佐 以 第 
4 章 与 第 6 章 中 的 少许 知识 , 作为 基本 内 容 开 设 排队 论 的 一 个 引 论 课程 . 


例 和 习题 


全 书 有 很 多 例题 和 解答 , 还 有 大 基 供 学 生 解 决 的 习题 有 100 多 个 带 * 号 的 习 
题 , 它们 的 解答 放 在 正文 的 最 后 . 这 些 带 * 号 的 习题 , 可 以 用 作 独 立地 学 习 与 测试 
准备 . 对 于 采用 本 书 授课 的 教师 , 我 们 免费 提供 包含 所 有 的 习题 讲解 教师 手册 . 


组 ” 织 


第 1 章 与 第 2 章 介绍 概率 论 的 基本 概念 . 在 第 1 章 中 介绍 了 公理 化 框架 , 而 在 
第 2 章 引 入 了 重要 的 随机 变量 概念 . 2.6.1 节 简 单 推导 了 正 态 数据 样本 的 样本 均值 
与 样本 方差 的 联合 分 布 . 

第 3 章 涉及 条 件 概率 和 条 件 期 望 的 主题 .“ 取 条 件 ” 是 概率 论 中 关键 工具 之 一 ， 
是 本 书 自始至终 强调 的 . 在 使 用 得 当时 , 取 条 件 的 方法 使 我 们 能 够 容易 地 解决 乍 看 
起 来 似乎 很 难 的 问题 . 这 章 的 最 后 一 节 介绍 了 取 条 件 在 三 方面 的 应 用 : (1) 电脑 列 
表 问 题 , (2) 随机 图 , (3) 波 利 亚 坛子 模型 以 及 它 与 Bose-Einstein 统计 的 联系 . 3.6 节 
介绍 上 记录 值 以 及 惊人 的 Ignatov 的 定理 . 

在 第 4 章 我 们 遇 到 第 一 个 随机 过 程 , 这 是 众所周知 的 马尔 可 夫 链 , 它 被 广泛 地 
应 用 于 研究 现实 世界 的 许多 现象 . 我 们 介绍 了 在 遗传 学 与 生产 过 程 的 应 用 , 还 引入 
了 时 间 可 逆 的 概念 , 并 对 它 的 用 处 作 了 阐述 . 4.5.3 节 基 于 随机 游 动 理论 介绍 了 一 个 
可 满足 性 问题 的 概率 算法 分 析 . 4.6 节 处 理 马尔 可 夫 链 在 其 暂 态 上 的 平均 停留 时 间 . 
4.9 节 引 入 马尔 可 夫 链 蒙特 卡 罗 方法 . 在 最 后 的 一 节 中 , 我 们 考虑 一 个 最 优 地 做 出 
决策 的 模型 , 这 是 熟知 的 马尔 可 夫 决 策 过 程 . 

在 第 5 章 中 , 我 们 致力 于 研究 一 类 称 为 计数 过 程 的 随机 过 程 . 特别 地 , 我 们 研究 
一 种 称 为 泊 松 过 程 的 计数 过 程 , 讨论 了 这 种 过 程 与 指数 分 布 间 的 紧密 联系 , 讨论 了 
泊 松 和 非 时 齐 泊 松 过 程 的 新 的 衍生 物 . 有 关 贪 楚 算 法 的 分 析 、 高 速 公 路 上 超车 次 数 
的 最 小 化 、 奖 券 的 收集 、AIDS 病毒 寻 踪 的 例子 以 及 复合 泊 松 过 程 的 材料 也 包含 在 
内 . 5.2.4 节 给 出 了 指数 随机 变量 的 卷 积 的 简单 推导 . 

第 6 章 考虑 连续 时 间 的 马尔 可 夫 链 , 特别 强调 生 灭 过 程 . 如 同 在 离散 时 间 的 马 
尔 可 夫 链 的 研究 一 样 , 时 间 可 逆 性 被 证 实 是 一 个 有 用 的 概念 . 6.7 节 介绍 了 在 计算 
中 重要 的 均匀 化 技巧 . 

第 7 章 是 更 新 理论 , 它 涉及 比 泊 松 过 程 更 为 一 般 的 一 类 计数 过 程 . 利用 更 新 报 
酬 这 程 , 得 到 了 极限 的 结论 , 并 将 它 应 用 于 不 同 的 领域 . 7.9 节 介绍 了 当 观 察 一 系列 
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独立 同 分 布 的 随机 变量 时 , 直至 某 种 模式 出 现 的 时 间 的 分 布 . 在 7.9.1 节 中 我 们 将 
揭示 , 更 新 理论 怎样 能 用 来 推导 , 直至 一 个 特定 的 模式 出 现 的 时 间 长 度 的 均值 和 方 
差 , 以 及 一 个 有 限 个 数 的 特定 的 模式 出 现 的 平均 时 间 . 在 7.9.2 节 中 , 我 们 假定 随机 
变量 有 相同 的 机 会 取 m 个 可 能 值 的 任意 一 个 , 并 计算 了 直至 m 个 不 同 值 都 出 现时 
的 平均 时 间 的 表达 式 . 在 7.9.3 节 中 , 我 们 假定 随机 变量 是 连续 的 ; 并 导出 了 出 现 m 
个 连续 递增 值 时 的 平均 时 间 的 表达 式 . 

第 8 章 处 理 排队 论 ( 即 等 待 线 ) 的 理论 . 在 对 基本 价格 等 式 和 极限 概率 的 类 型 
做 了 预备 性 的 处 理 后 , 我 们 考察 指数 排队 模型 , 并 说 明 如 何 分 析 这 个 模型 . 我 们 研究 
的 是 这 个 模型 的 一 个 重要 且 众 所 周知 的 排队 网 络 . 然后 , 我 们 转 而 研究 允许 某 些 分 
布 任意 的 模型 . 8.6.3 节 讨论 涉及 单条 服务 线 的 一 般 服务 时 间 队 列 的 优化 问题 ，8.8 
节 涉 及 单条 服务 线 一 般 服务 时 间 队 列 , 在 此 其 到 达 源 是 有 限 个 潜在 的 使 用 者 . 

第 9 章 涉及 可 靠 性 理论 . 工程 师 和 运筹 工作 者 可 能 对 这 一 章 最 感 兴趣 . 9.6.1 节 
阐述 了 确定 部 件 不 必 独 立 的 平行 系统 的 期 望 寿命 一 个 上 界 的 方法 , 而 9.7.1 节 分 析 
串联 结构 的 可 靠 性 模型 , 这 时 当中 有 一 个 同类 部 件 失效 时 , 其 他 部 件 进入 一 种 带 有 
暂缓 行为 的 状态 . 

第 10 章 涉及 布朗 运动 以 其 应 用 . 这 一 章 讨论 了 期 权 定价 理论 , 介绍 了 套利 定理 
及 其 与 线性 规划 的 对 偶 定理 的 关系 . 我 们 说 明了 套利 定理 如 何 导出 Black-Sholes 期 
权 定价 公式 . 

第 11 章 处 理 统计 模拟 , 这 是 对 于 解析 方法 难以 处 理 的 随机 模型 进行 分 析 的 有 
力 工具 . 这 一 章 讨论 了 生成 任意 分 布 的 随机 变 基 的 值 的 方法 , 以 及 降低 方差 以 增加 
模拟 的 有 效 性 的 方法 . 11.6.4 节 引入 了 重要 抽样 这 个 有 用 的 模拟 技术 , 并 且 指 出 了 
在 应 用 此 方法 时 倾斜 分 布 的 用 处 . 
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1.1 引 言 


现实 世界 的 现象 的 任何 实际 模型 , 必须 考虑 到 随机 性 的 可 能 . 就 是 说 , 往往 我 们 
所 关注 的 量 并 不 是 事先 可 料 的 , 这 种 基 所 展示 的 内 在 变化 必须 考虑 在 模型 之 中 . 为 
此 , 通常 使 用 的 模型 实质 上 是 概率 性 的 , 这 样 的 模型 自然 而 然 就 称 为 概率 模型 

本 书 的 多 数 章 节 会 涉及 自然 现象 中 不 同 的 概率 模型 . 显然 , 为 了 既 能 掌握 “如 
何 建立 模型 ", 又 能 掌握 随后 对 于 这 些 模 型 的 分 析 , 我 们 必须 具有 某 些 基本 概率 论 的 
知识 . 本 章 其 余 的 内 容 和 随后 的 两 章 是 关于 这 个 主题 的 探讨 . 


1.2 ”样本 空间 与 事件 


假设 我 们 将 完成 一 个 试验 , 其 结果 是 预先 不 可 料 的 . 然而 , 尽管 试验 的 结果 并 不 
是 预先 知道 的 , 但 是 , 我 们 可 以 假定 所 有 可 能 结果 (outcome) 的 集合 是 已 知 的 . 一 个 
试验 的 所 有 可 能 结果 的 集合 称 为 该 试验 的 样本 空间 , 记 为 5. 以 下 是 一 些 例子 . 

1. 如 果 试 验 由 抛 毛 一 枚 硬币 所 构成 , 那么 


S={HT} 
此 处 联 表示 抛掷 的 结果 是 正面 (Head), 而 T 表示 抛掷 的 结果 是 反面 (Tail). 
2. 如 果 试 验 由 搓 一 颗 骨 子 所 构成 , 那么 样本 空间 是 
S = {12,3,4,5,6} 
此 处 的 结果 i 表示 山子 撕 出 的 点 数 , i = 1, 2, 3,4,5,6. 
3. 如 果 试 验 由 抛 迫 两 枚 硬币 所 构成 , 那么 样本 空间 由 以 下 4 个 点 组 成 
5={(H,H),(H,T),(T, H), (T, T)} 


如 果 两 枚 硬币 都 出 现 正面 , 结果 就 是 (H, H). 如 果 第 一 枚 硬币 出 现 正面 , 且 第 二 枚 硬 
币 出 现 反 面 , 结果 就 是 (H, T). 如 果 第 一 枚 硬币 出 现 反面 , 且 第 二 枚 硬币 出 现 正面 ， 
结果 就 是 (T,H). 如 果 两 必 硬 币 都 出 现 反面 , 结果 就 是 (T,T). 

4. 如 果 试 验 由 掷 两 颁 届 子 所 构成 , 那么 样本 空间 由 下 列 36 个 点 组 成 
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(1,1), 
(2, 1), 


1,2), (1,3), (1,4), (1, 5), (1,6) 

2, 2), (2, 3), (2, 4), (2, 5), (2, 6) 

(3, 1), (3,2), (3, 3), (3, 4), (3, 5), (3,6) 

(4, 1), (4,2), (4,3), (4, 4), (4, 5), (4,6) 

(5, 1), (5, 2), (5, 3), (5, 4), (5, 5), (5, 6) 

(6, 1), (6, 2), (6, 3), (6, 4), (6, 5), (6, 6) 

这 里 , 如 果 第 一 颗 仍 子 掷 出 点 数 i, 且 第 二 颗 般 子 掷 出 点 数 j, 那么 称 结果 (i,j) 发 生 . 
5 如果 试验 由 测量 一 辆 汽车 的 寿命 所 构成 , 那么 样本 空间 由 所 有 的 非 负 实数 

构成 , 即 


S=[0,00)® 

样本 空间 5 的 任意 子 集 称 为 一 个 事件 (event). 以 下 是 事件 的 一 些 例子 . 

]. 在 上 述 例 1 中 , 如 果 已 = {H}, 那么 已 是 掷 一 枚 硬币 出 现 正面 这 一 事件 . 类 
似 地 , 如 果 互 = {T}, 那么 已 是 掷 一 枚 硬币 出 现 反面 这 一 事件 . 

2'. 在 例 2 中 , 如 果 已 = {1}, 那么 已 是 山子 点 数 为 1 这 一 事件 . 如果 已 = 
{2,4,6}, 那么 妃 是 骨 子 点 数 为 偶数 这 一 事件 . 

3/. 在 例 3 中 , 如 果 已 = {(H,H),(H,T)} 那么 已 是 第 一 枚 硬币 出 现 正面 这 一 
事件 . 

4 在 例 4 中 , 如 果 已 = {(1,6),(2,5), (3,4), (4,3), (5,2), (6,1)}, 那么 已 是 两 颗 
角子 点 数 和 为 7 这 一 事件 . 

5'. 在 例 5 中 , 如 果 已 = (2,6), 那么 已 是 一 辆 汽车 耐用 2 年 到 6 年 这 一 事件 .上 

当 试验 的 结果 在 已 中 时 , 我 们 就 说 事件 已 发 生 , 对 于 样本 空间 5 的 任意 两 个 
事件 已 和 F, 我 们 也 可 以 定义 新 事件 UF, EUF 由 所 有 在 已 中 或 在 下 中 的 结 
果 组 成 . 也 就 是 说 , 如 果 巨 或 下 有 一 个 发 生 , 事件 UF 就 发 生 . 例如 , 在 例 1 中 ， 
如 果 互 = {H} 且 下 = {T}, 那么 EUF = {H,T}. 也 就 是 说 , UF 是 整个 样本 空间 
5. 在 例 2 中 , 如 果 巨 = {1,3,5} 且 下 = 人,2,3}, 那么 UF = {1,2,3,5}, 因此 , 如 
果 搓 山子 的 结果 是 1 或 2 或 3 或 5, 那 么 已 U 尺 发 生 . 事件 UF 常常 称 为 事件 已 
与 事件 下 的 并 (union). 

对 于 样本 空间 5 的 任意 两 个 事件 EE 和 F, 我 们 也 可 以 定义 新 事件 BF, 有 时 
写 为 BNF, 称 为 EB 与 FF 的 交 (intersection). EF 由 所 有 既 在 忆 中 又 在 下 中 的 结 
果 组 成 . 也 就 是 说 , 只 有 E 和 FF 都 发 生 , 事件 EF 才 发 生 . 例如 ,在 例 2 中 , 如 果 
瑟 = {1,3,5} 且 下 = {1,2,3}, 那么 EF = {1,3}, 因此 , 在 掷 般 子 的 结果 是 1 或 3 时 ， 
EF 就 发 生 . 在 例 1 中 , 如 果 巨 = {五 } 且 下 = {T}, 那么 事件 EF 将 不 包含 任何 结 

@ 集合 (a,b) 定义 为 由 满足 a。< z < 5 的 所 有 的 点 z 构成. 集合 [a, 定义 为 由 满足 a < z < 6 


的 所 有 的 点 z 构成 . 集合 (a, 可 及 [a,b) 分 别 定义 为 由 满足 a < z < b 的 所 有 的 点 z 及 满足 
a < z <b 的 所 有 的 点 工 构 成 
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果 , 因此 它 不 可 能 发 生 . 为 了 给 这 样 的 事件 一 个 称谓 , 我 们 称 它 为 不 可 能 事件 (null 
event), 并 记 为 g. ( 即 g 是 指 不 包含 任何 结果 的 事件 .) 如 果 EF = &, 则 称 忆 与 
玉 互 不 相 容 (mutually exclusive). 

以 同样 的 方式 , 我 们 也 定义 两 个 以 上 事件 的 并 和 交 . 如 果 轧 , BE2,… 都 是 事件 ， 
那么 这 些 事件 的 并 , 记 为 U21 En, 定义 为 这 样 的 一 个 事件 , 它 由 至 少 包含 于 一 个 
En 的 所 有 结果 构成 , n = 1,2,…. 类 似 地 , 事件 En 的 交 , 记 为 门 := En, 定义 为 这 
样 的 一 个 事件 , 它 由 所 有 En 中 的 共同 结果 所 构成 , n = 1,2,… 

最 后 ， 对 于 任意 事件 EE， 我 们 定义 一 个 新 的 事件 E*， 称 为 E 的 对 立 事件 
(complement), 它 由 样本 空间 中 不 属于 B 的 所 有 结果 所 构成 . 也 就 是 说 ,BE* 发 生 
当 且 仅 当 吾 没有 发 生 . 在 例 4 中 , 如 果 E = {(1,6), (2,5), (3, 4), (4, 3), (5, 2), (6, 1)}, 
那么 E* 在 两 颗 骨 子 的 点 数 和 不 等 于 7 时 发 生 . 再 注意 , 因为 试验 必然 会 导致 某 些 
结果 , 这 就 推出 5° = 儿 . 
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考察 一 个 以 5 为 样本 空间 的 试验 . 对 于 样本 空间 8 的 每 一 个 事件 已 我 们 假 
定 一 个 满足 以 下 3 个 条 件 的 数 P(E): 

(0O<P(B) < 1. 

(i) P(5) = 1 

( 阁 ) 对 于 任意 互 不 相 容 的 事件 序列 请, E2,…, 即 当 n 关 m 时 EnEm = 9 的 事 


件 序列 , 有 
Pp (Ds,) Ss > P(E,) 


我 们 将 P(E) 称 为 事件 妃 的 概率 . 
例 1.1 在 搓 硬币 的 例子 中 , 如 果 假定 硬币 出 现 正面 与 出 现 反面 是 等 可 能 的 , 那么 
有 

P({H)) =P({T}) =3 


另 一 方面 , 如 果 我 们 有 一 枚 不 均匀 的 硬币 , 它 出 现 正面 的 可 能 是 出 现 反 面 的 两 倍 , 那 
么 我 们 有 2 1 
P({H})= 了 3 P(T]) = 和 图 


例 1.2 ”在 掷 骨 子 的 例子 中 , 如 果 假 定 6 个 数 的 出 现 都 是 等 可 能 的 , 那么 我 们 有 
P({1) =P({2) =P({3)) =P({4})=P({5})) =P({6)) = 
由 ( 阁 ) 推出 得 到 偶数 的 概率 等 于 
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P({2,4,6}) =P({2)) + P({4)}) +P({6)) = 四 


注 ”我 们 给 概率 选取 一 个 比较 形式 化 的 定义 , 即 定义 为 在 一 个 样本 空间 的 事件 上 
的 函数 . 这 显示 这 些 概 率 有 一 个 非常 直观 的 性 质 . 换 句 话说 , 如 果 试 验 不 断 地 重复 ， 
那么 (以 概率 1) 事件 媚 发 生 的 次 数 的 比率 正 是 P(E). 
因为 事件 和 E° 总 是 互 不 相 容 的 , 而 且 EU E* = S. 由 (ii) 和 (过 ), 我 们 有 
1=P(S) = P(BU PEe) =P(B)+P(Ee) 


也 就 是 
P(Ee) =1-P(E) (1.1) 


公式 (1.1) 说 明 , 一 个 事件 不 发 生 的 概率 是 1 减 去 它 发 生 的 概率 . 
现在 来 推导 在 E 中 或 在 FF 中 的 所 有 结果 的 概率 P(E U F) 的 公式 . 为 此 考虑 
P(E) +P(P), 它 是 已 中 所 有 结果 的 概率 加 上 F 中 所 有 结果 的 概率 . 因为 所 有 既 在 
巨 中 又 在 F 中 的 结果 在 P(E)+P(F) 中 都 算 了 两 次 , 而 在 P(EBUF) 中 只 算 了 一 次 ， 
所 以 必定 有 
P(E)+P(F)=P(EUF)+P(EF) 


或 者 , 等 价 地 
P(EUF)=P(E)+P(F) -P(EF) (1.2) 


注意 , 当 马 与 互 不 相 容 时 (也 就 是 , 当 EF = @g 时 ), 公式 (1.2) 说 明 
P(EUF)=P(E)+P(F)— P(g)=P(E)+P(F) 


这 是 一 个 也 可 以 由 ( 道 ) 得 到 的 结果 . (为 什么 有 P(2) = 0?) 
例 1.3 ”假定 掷 两 枚 硬币 . 假定 样本 空间 


3={(H,H),(HT),(T,H) (T, T)} 
中 的 4 个 结果 都 是 等 可 能 的 , 因而 每 个 的 概率 为 1/4. 设 
E={(H,H),(H,T)}, F={(H,H),(T,H)} 


也 就 是 说 , E 是 第 一 榴 硬币 出 现 正面 这 一 事件 , FF 是 第 二 枚 硬币 出 现 正面 这 一 事件 . 
利用 公式 (1.2) 可 得 到 第 一 枚 硬币 出 现 正面 或 第 二 枚 硬币 出 现 正面 的 概率 P(EU 
五 ), 它 由 下 式 给 出 


P(BUF)=P(E)+P(F) -P(EF)=3+3-P({H,H) =1-4=7 
这 个 概率 当然 能 够 直接 算出 , 因为 
P(BUF) =P{(H,H), (H,T),(T,H)} =3 a 
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我 们 也 可 以 计算 事件 巨 或 下 或 G 中 任意 一 个 发 生 的 概率 . 其 做 法 如 下 : 
P(EUFUG)=P((EUF)UG) 


由 (1.2) 式 , 它 等 于 
P(EUF)+P(G)—P((EUF)G) 

现在 , 我 们 留 给 你 来 验证 : 事件 (BU FF)G 与 EG U FG 是 等 价 的 . 因此 前 面 的 项 等 
E P(EUFUG) 

=P(E)+P(F) -P(EF)+P(G)— P(EGUFG) 

=P(E)+P(F)— P(EF)+P(G)— P(EG)—P(FG)+P(EGFG) 

=P(E)+P(F)+P(G)—P(EF)— P(EG)—P(FG)+P(EFG) (1.3) 
事实 上 , 对 于 任意 n 个 事件 本 ,Ez, Es,…, En, 用 归纳 法 可 以 证 明 


P(BiU EU...UEn)=D P(E)—D P(EE)+ ), P(EiE;E:)- 
i i<j i<j<k 
DD) P(EE;ERE)+::+(-1)"tP(Bi EEn) (1.4) 
i<j<k<l 
公式 (1.4) 就 是 容 斥 恒等式 , 用 文字 表达 , 它 说 明 , n 个 事件 的 并 的 概率 等 于 这 些 事 
件 一 次 取 一 个 的 概率 的 和 减 去 这 些 事件 一 次 取 两 个 的 概率 的 和 , 再 加 上 这 些 事件 一 
次 取 三 个 的 概率 的 和 , 依 此 类 推 . 
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假定 掷 两 颗 般 子 得 到 的 36 个 结果 都 是 等 可 能 地 出 现 的 , 因而 每 个 结果 的 概率 
为 1/36. 假定 我 们 知道 第 一 颗 散 子 的 点 数 是 4, 那么 在 已 知 这 个 信息 时 , 两 颗 仍 子 的 
点 数 和 为 6 的 概率 是 什么 呢 ? 为 了 计算 这 个 概率 , 我 们 做 如 下 推理 : 已 知 第 一 颗 骨 
子 的 点 数 是 4, 我 们 的 试验 至 多 可 能 出 现 6 个 结果 , 即 (4, 1), (4, 2), (4, 3), (4, 4), (4, 5)， 
(4,6). 由 于 这 些 结果 中 的 每 一 个 本 来 就 是 以 相同 的 概率 发 生 的 , 它们 应 该 仍旧 有 相 
等 的 概率 . 这 就 是 说 , 已 知 第 一 颗 般 子 的 点 数 是 4, 则 出 现 (4,1), (4,2), (4,3), (4, 4)， 
(4,5), (4, 6) 中 的 每 一 个 结果 的 (条 件 ) 概率 是 1/6, 而 同时 在 样本 空间 中 的 其 他 30 
个 点 的 (条 件 ) 概率 是 0. 因此 , 所 求 的 概率 是 1/6. 

如 果 以 妃 和 已 分 别 记 般 子 的 点 数 和 为 6 这 一 事件 及 第 一 颗 散 子 的 点 数 为 4 这 
一 事件 , 那么 刚才 得 到 的 概率 , 就 称 为 已 知 下 发 生 的 条 件 下 忆 发 生 的 条 件 概率 , 记 
为 P(EIF). 对 于 所 有 事件 已 和 下 成 立 的 P(EIF) 的 一 般 公式 , 将 在 下 文中 以 同样 
的 方式 推导 出 . 即 如 果 事 件 FF 发生, 那么 为 了 已 发 生 , 实际 出 现 的 结果 必须 是 一 个 


6 第 1 章 概率 论 引 论 


既 在 已 中 又 在 FF 中 的 结果 , 也 就 是 必须 在 EF 中 的 结果 . 现在 , 因为 已 知 F 已 经 
发 生 , 进而 FF 就 成 为 新 的 样本 空间 , 因此 , 事件 EF 发 生 的 概率 就 等 于 EF 的 概率 
相对 于 F 的 概率 . 这 就 是 RO 
P(F) 
注意 , 公式 (1.5) 只 有 当 P(F) > 0 时 才 是 完好 地 定义 的 , 因此 , 当 P(F) > 0 时 ， 
P(EIF) 才 有 定义 . 
例 1.4 假定 在 帽子 中 混杂 地 放 了 写 有 1 到 10 的 10 张 卡片 ,然后 抽取 了 其 中 的 一 
张 . 如 果 我 们 被 告知 抽出 的 卡片 上 的 数 至 少 是 5, 那么 它 是 10 的 条 件 概率 是 多 少 ? 
解 以 已 记 抽出 的 卡片 上 的 数 为 10 这 一 事件 , 而 以 下 记 抽 出 的 卡片 上 的 数 至 少 
为 5 这 一 事件 . 所 求 的 概率 是 P(EIF). 现在 , 由 公式 (1.5) 
P(EF,) 
P(F) 
可 是 , 因为 卡片 上 的 数 既 是 10 又 至 少 为 5 当 且 仅 当 它 是 10, 故 BF = E. 因此 

1 

P(EIF)= 共 =3 四 
10 


P(EIF)= 


(1.5) 


P(EIF) = 


例 1.5 某 家 庭 有 两 个 孩子 . 已 知 两 个 孩子 中 至 少 有 一 个 男孩 , 问 两 个 都 是 男孩 的 
条 件 概率 是 多 少 ? 假设 给 定 的 样本 空间 为 $ = {(b,5), (5,g), (9,5b), (9g,9)}, 且 所 有 的 
结果 都 是 等 可 能 的 (例如 , (b,g) 表示 老大 是 男孩 , 老 二 是 女孩 ). 

解 以 妃 记 两 个 孩子 都 是 男孩 这 一 事件 , 4 记 两 个 孩子 中 至 少 有 一 个 男孩 这 一 事 
件 , 那么 所 求 的 概率 由 下 面 给 出 ， 

P(BA) 

P(A) 


_ PH 
POG 5), (6,9), (9 5))) 


P(BIA) = 
1 
ee 
=$=3 

4 中 


b 
例 1.6 贝 甘 可 以 修 计算 机 课 ,也 可 以 修 化 学 课 . 如 果 她 修 计算 机 课 , 那么 她 得 到 A 
的 概率 为 1/2. 如 果 她 修 化 学 课 , 那么 她 得 到 A 的 概率 为 1/3. 贝 甘于 是 掷 硬币 来 决 
定 . 贝 英 在 化 学 课 上 得 A 的 概率 是 多 少 ? 
解 以 C 记 贝 英 修 化 学 课 这 一 事件 ,而 以 4 记 不 管 她 选修 什么 课 都 得 到 A 这 一 事 
件 , 那么 所 要 求 的 概率 是 P(A4C). 它 可 以 用 公式 (1.5) 计算 如 下 : 


汪汪 加 


P(4C) =P(C)P(4IC) = 图 和 
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例 1.7 ”假定 在 一 个 坛 中 有 7 个 黑 球 , 5 个 白 球 . 我 们 不 放 回 地 从 中 摸 取 两 个 球 . 假 

设 坛 中 的 每 个 球 都 是 等 可 能 地 被 摸 取 , 则 摸 取 的 两 个 球 都 是 黑 球 的 概率 是 多 少 ? 

解 以 已 和 互 分 别 记 摸 取 的 第 一 个 球 是 黑 球 这 一 事件 和 摸 取 的 第 二 个 球 是 黑 球 

这 一 事件 . 现在 , 已 知 摸 到 的 第 一 个 球 是 黑 球 时 , 还 有 6 个 黑 球 和 5 个 白 球 留 下 , 所 

以 P(EIF) = 6/11. 因为 P(P) 无 疑 是 7/12, 我 们 要 求 的 概率 是 | 
7 6 人 


五 五 = 丈 四 


P(EF) =P(F)P(EIF) 
例 1.8 ”假定 参加 聚会 的 三 个 人 都 将 帽子 扔 到 房间 的 中 央 . 这 些 帽子 先 被 弄 混 了 ， 
随后 每 个 人 在 其 中 随机 地 选取 一 个 问 三 人 中 没有 人 选 到 他 自己 的 帽子 的 概率 是 
多 少 ? 
解 ”解决 此 问题 , 可 首先 计算 其 对 立 概率 , 即 至 少 有 一 个 人 选 到 他 自己 的 帽子 的 概 
率 . 让 我 们 以 Ei(i = 1,2,3) 记 第 i 个 人 选 到 他 自己 的 帽子 这 一 事件 . 为 了 计算 概率 
P(BiU EzU Es), 我 们 首先 注意 到 


P(Ei) = =, i=1,2,3 


wi 


P(BiE,)) = i#j (1.6) 


elr el 


P(EiE2E;) = 
我 们 看 为 什么 (1.6) 是 正确 的 , 首先 考虑 
P(EiE;) = P(E;)P(E;|E:) 


现在 ,第 i 个 人 选 到 他 自己 的 帽子 的 概率 P(Ei) 显然 是 1/3, 因为 他 是 等 可 能 地 从 三 
个 帽子 中 任意 选取 的 . 另 一 方面 , 在 已 知 第 i 个 人 选 到 他 自己 的 帽子 时 , 只 有 剩 下 两 
个 帽子 可 以 让 第 7 个 人 选取 , 而 且 这 两 个 帽子 中 有 一 个 是 他 的 , 这 就 推出 他 将 以 概 
率 1/2 选取 到 它 . 这 就 是 说 , P(Ej|Ei) = 1/2, 因而 


P(EiE;) = P(Ei)P(Ej|E:) = 
为 了 计算 P(ElE2Es), 我 们 写 出 
P(EiE2Es) = P(EE2)P(Es|EE;) = BP(EslE 62) 


然而 , 在 已 知 前 两 个 人 得 到 他 们 自己 的 帽子 时 , 第 三 个 人 肯定 也 得 到 他 自己 的 帽子 
(因为 没有 其 他 帽子 可 选 了 ). 这 就 是 说 , P(Es|E1E2) =1. 所 以 


P(E EEs) = 


1 


ut 
33 


8 第 1 章 概率 论 引 论 


现在 , 由 公式 (1.4), 我 们 有 
P(BU E2U Es)= P(E)+P(E,)+P(Es)— P(EE,) 
—P(EiEs) — P(E2Es)+P(E!E,E) 


3 - 工 过 
=1-3+6=3 


6 3 
因此 , 三 人 中 没有 人 选 到 他 自己 的 帽子 的 概率 是 1 - 3 = 四 
1.5 独立 事件 


如 果 P(EF) =P(E)P(F) 

那么 两 个 事件 和 下 称 为 独立 的 (independent). 由 公式 (1.5), 这 殖 涵 了 如 果 
P(EIF) =P(E) 

那么 忆 和 FF 是 独立 的 ( 它 也 蕴涵 了 P(FIE) = P(F)). 这 就 是 , 如 果 下 已 经 发 生 这 
个 事实 并 不 影响 巨 发 生 的 概率 , 那么 巨 和 下 就 是 独立 的 . 也 就 是 忆 的 发 生 独立 于 
下 是 否 发 生 . 

不 独立 的 两 个 事件 巨 和 FF, 称 为 相依 的 (dependent). 
例 1.9 ”假定 我 们 扔 两 颗 均 匀 的 人 般 子 . 令 Ei 表示 两 颗 般 子 的 点 数 和 等 于 6 这 一 事 
件 , 而 下 表示 第 一 颗 骨 子 的 点 数 是 4 这 一 事件 . 那么 


P(EF) =P({4,2)) = 过 


而 
P(E)P(F) = i= 2 
因此 El 和 不 是 独立 的 . 其 原因 是 显然 的 , 因为 如 果 我 们 关心 的 是 扔 出 点 数 和 为 
6 的 可 能 性 (用 两 颗 山 子 ), 那么 当 第 一 颗 愉 子 停 在 4 (或 1,2,3,4,5 中 的 任意 一 个 数 ) 
时 , 我 们 会 很 高 兴 , 因为 还 有 机 会 得 到 点 数 和 为 6. 另 一 方面 , 当 第 一 颗 假 子 停 在 6 
时 , 我 们 并 不 高 兴 ,因为 已 经 不 再 有 机 会 得 到 点 数 和 为 6. 换 句 话说 , 我 们 得 到 点 数 
和 为 6 的 机 会 依赖 于 第 一 颗 般 子 的 结果 , 因此 , El 和 F 不 可 能 是 独立 的 . 
令 甩 表示 两 颗 散 子 的 点 数 和 等 于 7 这 一 事件 Es 是 否 与 下 独立 呢 ? 答案 为 
是 , 因为 
P(E2F) =P({4,3) = 高 
而 


11 
P(E2)P(F)= 66= 太 
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我 们 留 给 你 来 直接 说 明 为 什么 两 颗 山 子 的 点 数 和 等 于 7 这 一 eT 
子 的 结果 . 

独立 性 的 定义 可 以 推广 到 多 于 两 个 事件 的 情形 . 事件 Ei, Eo, Es,…, En 和 
立 的 , 如 果 对 于 这 些 事件 的 每 个 子 集 Ei, Ez,…, Er',r<n 有 P(EvEy… Er)= 
P(Ev)P(By)...P(E,). 

直观 地 看 , 事件 Ei, E2,…, En 是 独立 的 , 如 果 其 中 任意 一 些 事件 发 生 的 事实 并 
不 影响 其 他 任何 事件 的 概率 . 
例 1.10 (不 独立 的 两 两 独立 事件 ) 假定 从 装 有 号 码 分 别 为 1,2,3,4 的 4 个 球 的 管 中 
抽取 一 个 球 . 设 互 = {1,2},F = {1,3},G = {1,4}. 如 果 所 有 4 个 结果 都 是 等 可 能 
的 , 那么 

P(EF)=P(E)P(F)= 


P(EG) =P(E)P(G) = 


| 
4 
1 
4 
P(FG) =P(F)P(G) = 了 


然而 

了 =P(EFG) # P(E)P(F)P(G) 
因此 , 即使 事件 E, FG 是 两 两 独立 的 , 它们 并 非 是 联合 独立 的 . 网 
例 1.11 有 个 参赛 人 , 其 中 参赛 人 i(i = 1 ……r) 在 开始 时 有 mi(ni > 0) 个 


单位 (财富 )， 在 每 一 阶段 参赛 人 中 的 两 个 被 选中 比赛 , 赢 者 从 输 者 那里 得 到 一 个 
单位 ， 任 何 参赛 人 , 当 他 的 财富 减少 到 0 时 就 退出 , 如 此 继续 , 直至 某 个 参赛 人 占 
有 所 有 的 n = i_1ni 个 单位 为 止 , 此 参赛 人 就 是 胜利 者 ， 假 定 相继 比赛 的 结果 
是 独立 的 , 而 且 在 每 次 比赛 中 两 个 参赛 人 等 可 能 地 获胜 , 求 参 赛 人 i 是 胜利 者 的 
概率 . 

解 ”首先 , 假定 有 个 参赛 人 , 每 人 在 开始 时 有 1 个 单位 . 考虑 参赛 人 i. 在 各 阶 
段 他 以 相等 的 可 能 或 者 赢 一 个 单位 或 者 输 一 个 单位 , 各 阶段 的 结果 是 独立 的 . 此 外 ， 
他 将 继续 参赛 直到 他 的 财富 是 0 或 者 是 n. 因为 对 所 有 的 参赛 人 是 一 样 的 , 这 就 扒 
出 每 个 人 都 有 同样 的 机 会 成 为 胜利 者 . 因此 , 每 个 参赛 人 以 概率 1/n 是 胜利 者 . 现 
在 , 假设 ”个 参赛 人 分 成 > 组 , 其 中 第 i 组 有 mi 人 , i = 1,…,r. 也 就 是 , 参赛 人 
1,…,m 组 成 第 一 组 , 参赛 人 ni + 1,… ,ni 十 nz 组 成 第 二 组 , 依 此 类 推 . 那么 , 胜 
利 者 在 第 i 组 的 概率 是 ni/n. 但 是 , 因为 第 i 组 在 开始 时 的 全 部 财富 有 mi 个 单位 ， 
i 二 1,…,7, 而 每 次 比赛 由 不 同 组 的 成 员 参 赛 , 这 就 导致 : 赢 者 所 在 的 组 的 财富 增加 
一 个 单位 , 同时 , 输 者 所 在 的 组 的 财富 减少 一 个 单位 , 由 此 容易 看 出 胜利 者 出 自 第 i 
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组 的 概率 恰好 就 是 我 们 所 求 的 概率 . 进一步 地 , 不 管 在 每 个 阶段 是 由 怎样 的 参赛 人 
的 选择 构成 的 , 我 们 的 推理 也 说 明了 结论 是 正确 的 . 国 

假定 有 一 个 试验 序列 , 每 个 试验 的 结果 或 者 是 “成功” 或 者 是 “失败 ”. 以 Ei(i > 
1) 记 第 i 个 试验 的 结果 是 成 功 这 一 事件 . 如 果 对 于 所 有 的 谎 ,i2,… ,in， 


P(E Ei, Ei,) = ITPey 
j=1 


我 们 就 说 这 个 试验 序列 由 独立 的 试验 (independent trails) 组 成 . 


1.6 ” 贝 叶 斯 公式 


设 已 和 刁 是 事件 . 我 们 可 以 将 已 表示 为 
E= EFUEF: 


因为 为 了 使 一 个 点 在 已 中 , 它 必须 或 者 既 在 EE 中 又 在 下 中 , 或 者 只 在 已 中 而 不 在 
下 中 . 又 因为 EF 和 EF。 是 互 不 相 容 的 , 所 以 我 们 有 


P(E)=P(EF)+P(EF°) 
=P(E|IF)P(F) +P(EIF°)P(F°) 
=P(EIF)P(F)+P(EIF°)(1 — P(F)) (1.7) 


方程 (1.7) 说 明 , 事件 E 的 概率 是 已 知 FF 已 发 生 时 EE 的 条 件 概率 与 已 知 下 未 发 生 
时 马 的 条 件 概 率 的 加 权 平 均 , 权重 为 各 个 条 件 事件 发 生 的 概率 . 
例 1.12 考虑 两 个 伟 . 第 一 个 倪 中 有 2 个 白 球 , 7 个 黑 球 , 第 二 个 仁 中 有 5 个 白 球 ， 
6 个 黑 球 . 我 们 抛掷 一 枚 均匀 的 硬币 , 由 其 结果 是 正面 还 是 反面 决定 是 从 第 一 个 倪 
还 是 从 第 二 个 倪 中 抽取 一 个 球 . 已 知 取 到 的 球 是 白 球 , 问 抛 搓 的 结果 是 正面 的 条 件 
概率 是 多 少 ? 
解 ” 以 W 记 取 到 的 是 白 球 这 一 事件 , 以 H 记 抛掷 的 硬币 是 正面 向 上 这 一 事件 . 要 
求 的 概率 P(HIW) 可 以 计算 如 下 : 

P(HW) _ P(WIH)P(H) 


P(AIW) = PW) = PW) 


P(WIH)P(H) 
~ P(WIH)P(H)+P(WIH®)P(H®) 


21 
92 _22 
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例 1.13 ”学生 在 回答 多 项 选择 题 时 , 或 者 知道 答案 或 者 猜测 答案 . 假定 她 知道 答 
案 的 概率 是 p, 而 猜 的 概率 是 1 一 p. 假设 她 猜 对 的 概率 是 1/m, 其 中 m 是 多 选 题 可 
选 的 项 数 . 问 在 已 知 学 生 答题 正确 时 , 她 确实 知道 答案 的 概率 是 多 少 ? 
解 以 C 和 天 分 别 记 学 生 回答 正确 和 她 确实 知道 答案 这 两 个 事件 . 现在 
P(KC) _ P(CIK)P(K) 
P(C)  P(CIK)P(K)+P(CIK°)P(K®) 

. p 2 mp 

p+(1/m(l-p) 1+(m-1)p 
例如 , 若 m = 5,p = 1/2, 那么 学 生 对 于 她 答 得 正确 的 题 确实 知道 答案 的 概率 是 
5/6. 图 
例 1.14 某 实 验 室 检测 某 种 疾病 的 血液 检查 , 当 确实 有 病 时 的 有 效率 是 95% . 可 
是 , 该 检测 也 在 1% 的 健康 人 中 产生 “ 假 阳性 ” 结果 . ( 即 如 果 一 个 健康 人 去 检查 , 那 
么 检测 结果 为 他 有 病 的 概率 是 0.01.) 如 果 总 体 人 群 中 有 0.5% 的 人 真有 此 病 . 问 已 
知 某 人 检测 结果 为 阳性 时 , 他 有 病 的 概率 是 多 少 ? 
解 ” 以 D 记 被 检测 的 人 有 病 这 一 事件 , 而 以 已 记 他 的 检测 结果 是 阳性 这 一 事件 . 
要 求 的 概率 P(DIE) 得 自 


P(KIC) = 


_P(DE) _ P(EID)P(D) 
P(DIE) = 了 (可 = FBID)PD) + POEIDIPD:) 
二 (0.95)(0.005) _ 95 
一 05510005) + (0.01)(0.995) 一 294 ~ 0323 
因此 , 检测 结果 是 阳性 的 人 中 , 只 有 32% 的 人 确实 得 了 病 . mn 


方程 (1.7) 可 以 以 如 下 的 方式 推广 . 假定 五, F2,…, Fn 是 互 不 相 容 的 事件 , 使 
得 Ui Fi = 5. 换 句 话说 , ,2,…, FF 中 正好 有 一 个 事件 将 发 生 . 通过 写 出 
E= UER 
til 


并 用 事件 EFi(i = 1,2,…,n) 互 不 相 容 的 事实 , 我 们 得 到 
P(E)= DP(EF) = DP(EIF)P(F:) (1.8) 
i=1 i=1 


因此 , 方程 (1.8) 展示 了 , 对 于 给 定 的 有 且 只 有 一 个 发 生 的 事件 i, F2,…, F，， 
我 们 能 通过 首先 对 F 中 发 生 的 一 个 事件 取 条 件 计 算 P(E)， 也 就 是 说 , 它 说 明了 
P(E) 等 于 P(E|Fi) 的 加 权 平 均 , 每 项 用 被 取 条 件 的 那个 事件 的 概率 加 权 . 

假定 现在 已 已 经 发 生 , 而 我 们 关心 的 是 确定 FF 中 哪个 也 发 生 了 . 由 方程 (1.8)， 
我 们 有 
P(EE) _ _ P(EIF)P(E) 


P(BIE) = P(E) ~ Fe PEIF)P(E) 


(1.9) 
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方程 (1.9) 称 为 贝 叶 斯 公式 (Bayes' formula). 

例 1.15 ”你 知道 某 一 封 信 等 可 能 地 在 3 个 不 同 的 文件 夹 的 任意 一 个 之 中 . 若 此 信 
实际 上 在 文件 夹 i 中 (i = 1,2,3) 而 你 经 过 对 文件 夹 i 的 快速 翻阅 发 现 了 你 的 信 的 
概率 记 为 ai( 我 们 可 以 假定 ai < 1) . 假定 你 查看 了 文件 夹 1 且 没 有 发 现 此 信 . 问 信 
在 文件 夹 1 中 的 概率 是 多 少 ? 


以 (i = 1,2,3) 记 此 信 在 文件 夹 i 中 这 个 事件 , 而 已 是 通过 对 文件 夹 1 搜索 


但 并 未 看 到 信 这 个 事件 . 我 们 要 求 P(Fi|E). 由 贝 叶 斯 公式 , 我 们 得 到 


“2. 
抛掷 一 枚 硬币 直至 正面 接连 地 出 现 两 次 . 此 试验 的 样本 空间 是 什么 ?如 果 硬 币 是 均匀 的 , 问 


1 
P(EIF)P(F) (La 了 Le 
P(RIE)= 家 i 站 
全 同 - 下 ,PCBIRP(R aolrlil sa 
3 3 3 
习 题 


， 盒 中 有 红 、 绿 、 蓝 三 个 弹 球 , 考察 如 下 试验 , 从 盒 中 取 一 个 弹 球 , 然后 放 回去 , 再 从 盒 中 取 第 


二 个 弹 球 ， 此 试验 的 样本 空间 是 什么 ? 如 果 在 任意 情形 下 , 盒 中 的 每 个 弹 球 都 是 等 可 能 地 
被 抽取 的 , 那么 样本 空间 的 每 一 个 点 的 概率 是 多 少 ? 
在 取 第 二 个 弹 球 前 不 放 回 第 一 个 弹 球 时 , 重 做 习题 1. 


抛掷 次 数 恰 为 4 的 概率 是 多 少 ? 
,。 设 ,下 ,G 是 三 个 事件 . 求 ,FG 的 下 列 事件 的 表达 式 . 
(a) 只 有 下 发 生 . (b) E, 下 都 发 生 , 但 是 G 不 发 生 . 
(e) 至 少 一 个 事件 发 生 . (d) 至 少 两 个 事件 发 生 . 
(e) 三 个 事件 都 发 生 . (90) 三 个 事件 都 没有 发 生 . 
(g) 至 多 一 个 事件 发 生 . (h) 至 多 两 个 事件 发 生 . 


“5. 一 个 人 在 拉 斯 维 加 斯 使 用 下 面 的 赌博 方法 , 他 下 注 1 美元 于 轮 盘 赌 的 红色 . 如 果 他 赢 了 , 他 


-a 


“9. 


就 离开 . 如 果 他 输 了 , 他 再 赌 一 次 红色 并 下 注 2 美元 然后 不 管 什么 结果 , 他 都 离开 .假定 
他 每 次 下 注 赢 的 概率 都 是 1/2、 他 回 家 时 是 赢家 的 概率 是 多 少 ? 为 什么 这 一 赌博 方法 并 未 
被 每 个 人 采用 ? 


. 证 明 E(FUG) = EFU EG. 
. 证 明 (BUF)* = BeFe. 
. 若 P(E) = 0.9 且 P(F) = 0.8, 证 明 P(EF) > 0.7. 一 般 地 , 证 明 


P(EF) > P(E)+P(F)-1 

这 称 为 邦 览 罗 尼 不 等 式 (Bonferroui's inequality). 

如 果 巨 中 的 每 个 点 都 在 FF 中 , 我 们 就 说 BC F. 证 明 , 着 EC F, 则 
P(F) = P(E)+P(FE') > P(E) 


10. 


11. 
12. 


13. 


14. 


15. 


16. 


"17. 


18. 


“19. 


20. 
21. 


22. 


23. 


证 明 
Pp (V5) < 2 PE) 
这 称 为 布尔 不 等 式 (Bool's inequality). 
提示 , 或 者 用 方程 (1.2) 和 数学 归纳 法 , 或 者 说 明 U1 Ei = Ui Fi, 其 中 = Bi, Fi = 
Bi 门 ;-3 5, 并 且 利用 概率 的 性 质 (iii). 4 
投 两 晒 均 匀 的 从 子 ， 点数 和 为 i(i = 2, 3,…, 12) 的 概率 各 是 多 少 ? 
设 巨 和 下 是 某 试验 的 样本 空间 中 互 不 相 容 的 事件 .假定 重 复 做 试验 直至 妃 和 天 有 一 个 
发 生 . 这 个 超 试验 的 样本 空间 是 什么 样 的 ? 证 明 事件 已 在 事件 F 之 前 发 生 的 概率 是 


P(E)/[P(E) + P(F)] 


提示 : 原来 的 试验 施行 了 n 次 , 而 忆 出 现在 第 n 次 的 概率 为 P(E)x(1-p)" ,n= 1,2,…， 
其 中 p = P(E) 十 P(F). 将 这 些 概率 相 加 就 得 到 我 们 要 的 答案 . 
双 般 子 博弈 的 玩法 如 下 . 玩家 投 两 颗 般 子 , 如 果 其 和 是 7 或 11, 她 就 赢 ， 如 果 其 和 是 2， 3 
或 12, 她 就 输 . 如 果 是 其 他 结果 , 就 继续 玩 , 直至 她 再 次 投 到 这 个 点 数 ( 则 她 赢 ), 或 者 她 投 
到 7 ( 则 她 输 ). 计算 玩家 赢 的 概率 . 
投 一 次 仙子 赢 的 概率 为 p，A 开始 投 , 如 果 他 失败 了 , 般 子 就 转 给 B, 她 想 在 她 投 时 赢 ， 他 
们 反复 投 这 颗 般 子 直 至 有 一 人 赢 . 问 他 们 各 自 赢 的 概率 是 多 少 ? 
E=EFUEF:, EUF=EUFE: 
用 习题 15 证 明 

P(EUF)=P(E)+P(F)— P(EF) 
假设 三 个 人 中 每 人 抛掷 一 枚 硬币 , 如 果 有 一 人 抛掷 的 结果 与 其 他 人 抛掷 的 结果 不 同 ,游戏 就 
结束 . 不 然 , 他 们 就 重新 抛掷 他 们 的 硬币 . 设 硬币 是 均匀 的 , 那么 游戏 在 第 一 轮 结束 的 概率 
是 多 少 ? 如 果 所 有 的 硬币 都 是 不 均匀 的 , 并 且 出 现 正面 的 概率 为 1/4, 那么 游戏 在 第 一 轮 结 
东 的 概率 是 多 少 ? 
假定 生 下 的 孩子 是 男 还 是 女 是 等 可 能 的 . 如 果 一 个 家 庭 有 两 个 孩子 , 已 知 (a) 老大 是 女孩 
(b) 至 少 一 个 是 女孩 , 那么 这 两 个 孩子 都 是 女孩 的 概率 是 多 少 ? 
撞 两 颗 骨 子 . 问 至 少 有 一 个 是 点 数 6 的 概率 是 多 少 ? 如 果 这 两 个 面 的 点 数 不 一 样 , 那么 至 少 
有 一 个 是 6 的 概率 是 多 少 ? 
投了 三 颗 散 子 . 三 颗 般 子 中 恰好 有 两 颗 出 现 相同 的 点 数 的 概率 是 多 少 ? 
假定 5% 的 男性 和 0.25% 的 女性 是 色盲 . 随机 地 选取 一 个 色盲 的 人 , 这 个 人 是 男性 的 概率 
是 多 少 ? 假定 有 人 数 相等 的 男性 与 女性 . 
A 和 B 博弈 直到 其 中 一 人 比 另 一 人 多 出 2 点 以 上 为 止 . 假定 A 独立 地 赢 每 一 点 的 概率 为 
2, 他 们 总 计 玩 了 2n 点 的 概率 是 多 少 ? A 赢 的 概率 是 多 少 ? 
对 于 事件 1, E2,…, En, 证 明 


P(EiE2::. En) = P(E)P(E2|E)P(Es|E1E2):::P(En|El:: En-1) 
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“25. 


26. 


“27. 


28. 
29. 


“30. 


31. 
“32. 


35. 
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在 一 次 选举 中 , 候选 人 A 得 到 n 张 选票 , 候选 人 B 得 到 m 张 选 票 , 其 中 n > m. 假设 在 
计 票 中 , 所 有 可 能 的 ”+ m 张 票 的 排列 顺序 都 是 等 可 能 的 . 以 Pn,m 记 自 第 一 张 起 A 总 处 


于 领先 的 概率 . 求 
(a) Pa1, (b) Psa, (c) Pni, (d) Pa2, (e) Ps2， 
(f) Pn2， (g) Psas， (h) Pss， (iD) Psa， (i) 猜测 Pn,m 的 值 . 


从 一 副 52 张 扑克 牌 中 随机 选取 两 张 , 问 

(a) 它们 组 成 一 对 (就 是 它们 有 相同 的 数字 ) 的 概率 是 多 少 ? 

(b) 已 知 两 张 花色 不 同 , 它们 组 成 一 对 的 条 件 概率 是 多 少 ? 

一 副 52 张 扑 克 牌 (包含 所 有 4 个 A) 被 随机 地 分 为 4 堆 , 每 堆 13 张 . 定义 i, Ea, Es 和 
Es 如 下 ， 

书 ={ 第 一 堆 恰 有 一 个 A}， E2 ={ 第 二 堆 恰 有 一 个 A}， 

Es ={ 第 三 堆 恰 有 一 个 A}， Es ={ 第 四 堆 恰 有 一 个 A}. 

用 习题 23 的 结论 求 在 每 一 堆 中 都 有 一 个 A 的 概率 P(E E2EsE4). 

假定 在 习题 26 中 定义 了 事件 Ei,i = 1,2,3,4: 

已 ={ 有 一 堆 中 有 黑 桃 A}， E2 ={ 黑 桃 A 与 红心 A 在 不 同 的 堆 }， 

={ 黑 桃 A, 红心 A 与 方块 A 都 在 不 同 的 堆 }， Es={ 四 个 A 都 在 不 同 的 堆 }. 

现在 , 用 习题 23 求 在 每 一 堆 中 都 有 一 个 A 的 概率 P(E1E2EsE4). 将 你 的 答案 与 习题 26 
的 结果 作 比 较 . 

如 果 B 的 发 生 使 A 更 可 能 发 生 , 那么 , 4 的 发 生 是 否 使 B 更 可 能 发 生 ? 

假定 P(E) = 0.6, 如 果 (a) EE 和 下 互 不 相 容 ，(b)E C F，，(c)F C E, 那么 P(EIF) 分 
别 表示 什么 ? 

比尔 和 乔治 一 起 去 射击 . 他 们 同时 射击 同一 个 目标 . 假设 比尔 独立 地 射 中 目标 的 概率 是 0.7， 
乔治 独立 地 射 中 目标 的 概率 是 0.4. 

(a) 已 知 恰 有 一 颗 子 弹射 中 目标 , 求 它 是 乔治 射 中 的 概率 . 

(b) 已 知 目标 射 中 , 求 它 是 乔治 射 中 的 概率 . 

已 知 两 个 般 子 的 点 数 和 是 7 时 , 第 一 颗 般 子 的 点 数 是 6 的 条 件 概率 是 多 少 ? 

假定 所 有 n 个 参加 聚会 的 人 将 他 们 的 帽子 扔 在 房间 的 中 央 . 然后 每 个 人 随机 地 取 一 顶 帽子 . 
证 明 没有 人 选 到 自己 的 帽子 的 概率 为 


注意 , 当 一 co 时 它 趋 于 e :. 这 是 否 令 人 惊奇 ? 


。 有 4 个 一 年 级 男生 、6 个 一 年 级 女生 、6 个 二 年 级 男生 共 上 一 门 课 . 为 了 使 在 随机 选取 一 个 


学 生 时 性 别 与 班级 独立 , 在 这 班 中 需要 出 现 多 少 二 年 级 女生 ? 


.为 了 在 轮 盘 赌 上 能 说 , 琼斯 先生 设计 了 一 个 赌 法 .当下 注 时 , 他 下 注 于 红色 . 而 且 只 在 以 前 


的 十 次 转动 都 落 在 一 个 黑色 的 数 上 时 , 他 才 下 注 . 他 的 理由 是 他 赢 的 机 会 很 大 , 因为 连续 11 
次 转 到 黑色 的 概率 很 小 对 于 这 个 方法 你 有 什么 看 法 ? 

连续 地 抛掷 一 枚 均匀 的 硬币 . 求 抛掷 的 前 四 次 是 下 列 情况 的 概率 ， 

(a) H,H,H,H. (b) T, H,H,H. 


36. 


37. 
38. 


39. 


“40. 


41. 


42. 


43. 


46. 


47. 


(0) 模式 T,H,H,H 出 现在 模式 H, H,H,H 之 前 的 概率 . 

考察 两 个 盒子 . 一 个 盒 内 有 一 个 黑 弹 球 和 一 个 白 弹 球 ， 另 一 个 盒 内 有 两 个 黑 弹 球 和 一 个 白 

弹 球 . 随机 选取 一 个 盒子 , 并 在 此 盒子 中 随机 取 一 个 弹 球 . 问 取出 的 弹 球 是 黑色 的 概率 是 多 

少 ? 

在 习题 36 中 , 已 知 取出 的 是 白 球 , 问 此 球 出 自 第 一 个 盒子 的 概率 是 多 少 ? 

从 1 中 有 两 个 白 球 , 一 个 黑 球 , 人 2 中 有 一 个 白 球 , 五 个 黑 球 ， 从 人 管 卫 中 随机 取 一 个 球 , 放 

到 从 2 中 . 然后 从 丛 2 中 取 一 个 球 , 正好 是 白 球 . 问 从 人 1 转移 到 伟 2 的 球 是 白 球 的 概率 

是 多 少 ? 

假定 商店 A、B 和 C 各 有 50 个 、75 个 和 100 个 雇员 , 其 中 各 有 50%、60% 和 70% 为 女 

性 . 在 所 有 的 雇员 中 , 不 管 性 别 , 辞职 的 可 能 性 是 相等 的 . 现在 一 个 雇员 辞职 了 , 并 且 是 女性 . 

她 在 商店 C 工作 的 概率 是 多 少 ? 

(a) 某 赠 徒 在 衣 袋 中 放 有 一 枚 均匀 的 硬币 和 一 枚 两 面 都 是 正面 的 硬币 . 他 从 中 随机 选取 一 

枚 , 抛掷 后 结果 是 正面 . 问 它 是 均匀 的 硬币 的 概率 是 多 少 ? (b) 假定 他 对 同一 枚 硬币 抛掷 第 

二 次 , 它 又 出 现 正面 . 现在 , 它 是 均匀 的 硬币 的 概率 是 多 少 ? (c) 假定 他 又 对 同一 枚 硬币 抛 

掷 第 三 次 , 它 出 现 反面 . 现在 , 它 是 均匀 的 硬币 的 概率 是 多 少 ? 

在 某 个 种 类 的 鼠 中 , 黑色 比 褐色 占 优势 . 假定 一 只 有 黑色 双亲 的 黑 鼠 有 一 只 褐色 同胞 

(a) 它 是 纯 黑 鼠 的 概率 是 多 少 ? (相对 于 一 个 黑色 基因 与 一 个 褐色 基因 的 混 种 鼠 .) 

(b) 假设 当 一 只 黑 鼠 和 一 只 褐 鼠 交配 后 的 五 只 后 代 都 是 黑 鼠 时 ， 它 是 纯 黑 鼠 的 概率 是 多 
少 ? 

在 盒 中 有 三 枚 硬币 . 一 枚 是 双 正面 硬币 , 另 一 枚 是 均匀 的 硬币 , 而 第 三 枚 是 出 现 正面 的 概率 

为 75% 的 不 均匀 硬币 . 当 从 这 三 枚 硬币 中 随机 选取 一 枚 抛掷 时 , 它 出 现 正面 问 它 是 双 正 

面 硬币 的 概率 是 多 少 ? 

蓝 眼 睛 基因 是 隐 性 的 , 意 即 , 提供 基因 给 某 人 的 两 个 人 必须 都 有 蓝 眼 睛 基因 , 这 个 人 的 眼睛 

才 会 是 蓝 的 . 约 ( 女 ) 和 乔 ( 男 ) 两 人 都 是 褐色 眼睛 , 而 他 们 的 母亲 都 是 蓝 眼 睛 , 他 们 的 褐色 

眼睛 的 女儿 甘 洛 希望 和 蓝 色 眼睛 的 男人 有 一 个 蓝 色 眼睛 的 孩子 . 问 孩 子 是 蓝 色 眼 睛 的 概率 

是 多 少 ? 


， 管 1 中 有 五 个 白 球 , 七 个 黑 球 . 货 2 中 有 三 个 白 球 , 十 二 个 黑 球 . 我 们 抛掷 一 枚 均匀 的 硬币 . 


如 果 结果 是 正面 , 就 从 人 1 中 取出 一 个 球 , 而 如 果 结 果 是 反面 , 就 从 管 2 中 取出 一 个 球 . 假 
定 选取 到 的 是 白 球 . 问 抛掷 结果 是 反面 的 条 件 概率 是 多 少 ? 


,一 个 华中 有 b 个 黑 球 , 7 个 红 球 . 从 中 随机 选取 了 一 个 球 , 但 是 当 将 它 放 回 货 中 的 时 候 , 又 


加 进 了 e 个 与 之 同色 的 球 . 现在 我 们 再 取 另 一 个 球 . 证 明 , 已 知 取 到 的 第 二 个 球 是 红 球 时 ， 
取 到 的 第 一 个 球 是 黑 球 的 条 件 概率 是 b/(b 十 7 十). 

狱 吏 通知 三 个 犯人 , 已 经 随机 地 从 中 选 定 一 人 处 死 , 而 其 余 两 人 将 被 释放 . 犯人 A 要 求 狱 吏 
私下 告诉 他 哪 一 个 犯人 将 被 释放 , 并 声称 泄露 这 个 信息 是 无 害 的 , 因为 他 已 经 知道 至 少 一 人 
将 获得 自由 . 狱 吏 拒绝 回答 这 个 问题 , 并 指出 如 果 A 知道 哪 一 个 犯人 将 被 释放 , 那么 他 被 处 
死 的 概率 就 从 1/3 上 升 至 1/2, 因为 他 将 是 两 个 犯人 中 的 一 个 .对 于 狱 吏 的 论据 你 有 什么 
看 法 ? 

对 固定 的 事件 B, 证 明 对 于 所 有 的 事件 4, 全 体 P(AIB) 满足 概率 的 三 个 条 件 ， 由 此 推论 
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P(A|B) = P(4|BC)P(CIB) +P(4|BC*)P(C<|B) 
然后 直接 验证 以 上 方程 . 


“48. 在 某 个 社区 , 60% 的 家 庭 拥有 汽车 ,30%% 的 家 庭 拥有 房产 , 而 20% 的 家 庭 既 有 汽车 又 有 房 
产 . 随机 选取 一 个 家 庭 , 求 此 家 庭 或 者 有 汽车 或 者 有 房产 但 不 是 两 者 都 有 的 概率 . 
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第 2 章 随机 变量 


2.1 随机 变量 


在 做 试验 时 , 常常 是 相对 于 试验 结果 本 身 而 言 , 我 们 主要 还 是 对 结果 的 某 些 函 
数 感 兴趣 . 例如 , 在 掷 仍 子 时 , 我 们 常常 关心 的 是 两 颗 般 子 的 点 数 和 , 而 并 不 真正 关 
心 其 实际 结果 . 就 是 说 , 我 们 也 许 关心 的 是 其 点 数 和 为 7, 而 并 不 关心 其 实际 结果 是 
否 是 (1,6) 或 (2,5) 或 (3,4) 或 (4,3) 或 (5,2) 或 (6,1). 我 们 所 关注 的 这 些 量 , 或 者 更 
形式 地 说 , 这 些 定义 在 样本 空间 上 的 实 值 函数 , 称 为 随机 变量 . 

因为 随机 变量 的 值 是 由 试验 的 结果 决定 的 , 所 以 我 们 可 以 给 随机 变 基 的 可 能 值 


指定 概率 . 


例 2.1 以 X 记 随机 变量 , 它 定义 为 两 颗 均 匀 的 般 子 的 点 数 和 , 那么 


P 


P 


P 


了 


P 


了 


F 


:2 


F 


X=2 


X=3 


X=4 


X=5 


P{X=6 


X=7 


X=8 


X=9 


= 


= 了 


1 
(1,1)}= 可 
(49),(2, 有 = 药 
(4,3),(22,(3, 有 )}= 萝 


Ga)G2)(4D)= 匣 


=P{(1,5),(2,4), (3,3), (4,2),(5, 1)} = 


(1,60),(2,5),(8,0),(4,3),(5,2), (6,D} = 2 
(2,6),(3,5), (4,4),(5,3),(6,2)} = 襄 


(8,0),(45),(5,9,(6,3)}= 


X=10} = P{(4,6), (5,5), (6,4)} = 总 


X=11} =P{(5,6),(6,5)} = 2 


36 


X=12} =P{(6,6)} = 页 


换 句 话说 , 随机 变量 X 能 取 从 2 到 12 的 任意 整数 值 , 而 且 取 每 个 值 的 概率 由 方程 
(2.1) 给 出 . 因为 随机 变量 X 必须 取 2 到 12 中 的 一 个 值 , 所 以 必须 有 
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12 12 
=P (ex -可 ) = 
这 可 以 用 方程 (2.1) 验证 . 国 
例 2.2 再 举 一 个 例子 , 假定 我 们 的 试验 是 由 抛掷 两 枚 均匀 的 硬币 组 成 . 以 Y 记 出 
现 正面 的 次 数 , 那么 Y 是 一 个 取 值 于 0, 1, 2 的 随机 变量 , 分 别 具 有 概率 
P{Y =0} =P{(T,7)} =3 
P{Y =1} =P{(T, H), (H,T)} = 3 
P{Y =2} =P{(H,H)} = 3 
当然 , P{Y =0} +P{Y =1}+P{Y =2} =1. 站 
例 2.3 ”假定 我 们 抛掷 一 枚 出 现 正面 的 概率 为 p 的 硬币 直至 正面 首次 出 现 . 以 N 
记 需 要 抛 搓 的 次 数 , 假定 相继 抛掷 的 结果 是 独立 的 , 那么 N 是 取 值 于 1,2,3,… 中 的 
某 个 值 的 随机 变 基 , 分 别 具 有 概率 
P{N=1}=P{H}= 
P{N =2} =P{(T,H)} = (pp 


P{N=3} =P{(7,7,H)}= (1—p)’p 
P{N=n} =P{(T,T,,T,H)}=(1-p)"-!p, n>1 
n-l 
作为 验证 , 注意 到 


P (Dw="))= Dr- ?Dan 1 。 国 


例 2.4 ”假定 我 们 的 试验 是 观察 电池 在 损耗 前 能 用 多 久 . 并 假定 我 们 主要 并 不 关心 
电池 的 实际 寿命 , 而 只 是 关心 电池 是 否 至 少 能 用 两 年 . 在 这 种 情形 下 , 我 们 可 以 定 
义 随机 变量 7 为 

、 -{ 1， 若 电池 的 寿命 是 两 年 或 更 长 

0， 其 他 情形 


如 果 以 巨 记 电池 能 使 用 两 年 或 更 长 , 那么 随机 变量 7 称 为 事件 妃 Se 
随机 变 基 . (注意 了 的 取 值 依赖 于 已 是否 发 生 .) 
例 2.5 ”假定 相继 地 做 独立 试验 , 其 中 每 次 试验 有 m 种 可 能 的 结果 ， 访 人 
1"… Pm, >i1Pi 二 1. 以 XX 记 直 至 每 一 个 结果 至 少 出 现 一 次 所 需 的 试验 次 数 . 
与 其 直接 考虑 P{X = n}, 我 们 不 如 首先 确定 P{X > n}, 这 是 在 做 n 次 试验 
后 , 至 少 有 一 个 结果 还 没有 出 现 的 概率 . 以 A; 记 起 初 的 n 次 试验 后 还 没有 出 现 结 
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果 i 这 个 事件 , i = 1,…,m, 那么 
P{X >n} =P (Da) 


=》 P(A4i) — > P(4i4j) 
i=1 i<j 人 
十 P(4i4j4k) 一 … 十 (-1IJm+lP(4 4m) 
i<j<k 
现在 , P(4i) 是 起 初 的 n 次 试验 中 每 一 次 结果 在 非 i 的 结果 中 的 概率 , 所 以 由 独立 
性 得 
P(Ai) = (1—pi)" 
类 似 地 , P(4i4;) 是 起 初 的 n 次 试验 中 每 一 次 结果 在 既 非 i 又 非 7 的 结果 中 的 概率 ， 
所 以 有 
P(A4i4;) = (1 —pi —p;)" 

鉴于 所 有 其 他 的 概率 都 类 似 , 我 们 看 到 


P{X>n}=D (1 -p)" -Dp —p)" 
i=1 


12 
+ BD (pi—pi—pk)" —.: 
i<j<k 
因为 P{X = 对 = P{X > nm-1}-P{X > n}, 利 用 代数 恒等式 (1 一 a)"-! 一 (1-a)" = 
al 一 oj” 我 们 看 到 


P{X=n} = pi 一 pn 一》 (pit+p)(l— pi —pi)"! 
i=1 


i<j 

+ 》 (pi+pi;+pk)(1—pi—p;— pr)" —. mn 
i<j<k 
在 前 面 所 有 的 例子 中 , 我 们 所 关心 的 随机 变 基 , 或 者 取 有 限 个 可 能 的 值 , 或 者 取 
可 数 个 可 能 的 值 9. 这 样 的 随机 变量 称 为 离散 的 (discrete). 可 是 也 存在 取 连 续 多 个 
可 能 值 的 随机 变 基 . 这 称 为 连续 的 (continuous) 随机 变量 . 例如 如 果 假 定 汽 车 的 寿 
命 取 某 个 区 间 (a,b) 中 的 任意 值 , 那么 记 汽 车 寿命 的 随机 变量 就 是 连续 的 . 

随机 变量 X 的 累积 分 布 函数 (cumulative distribution function, 简称 分 布 函数 ， 

cdf)F(.) 定义 为 , 对 于 任意 实数 b, 一 00 < b < oo， 


F(b)=P{X <b} 


@ 一 个 集合 是 可 数 的 , 如 果 它 的 元 素 可 以 与 正 整数 一 一 对 应 . 
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用 文字 描述 就 是 , F(b) 记 随 机 变量 X 取 一 个 小 于 或 者 等 于 b 的 值 的 概率 . 分 布 函数 
书 具有 以 下 性 质 

(i) F(O) 是 的 非 减 函数 ， 

(ii) limg_ .oo F(6) = F(00) = 1 

(ii) lims_,_ooF(b) = F(-00) = 0. 

性 质 (i) 是 由 于 对 于 a <b, 事件 {X < a} 包含 于 事件 {X < 时 中 , 所 以 它 有 较 
小 的 概率 . 性 质 (ii 和 (iii) 是 由 于 X 必须 取 某 个 有 限 的 值 

有 关 X 的 所 有 概率 问题 都 可 以 用 分 布 函数 F(.) 回答 . 例如 , 对 于 所 有 的 a < 6 
我 们 有 

P{a<X<6}=F(b)— F(a) 

这 是 由 于 我 们 可 以 通过 先 计算 {X < 里 的 概率 (也 就 是 F(b)), 然后 减 去 {X < a} 
的 概率 (也 就 是 F(a)) 算出 Pfa <X< 叶 - 

如 果 我 们 需要 X 严格 地 小 于 的 概率 , 可 以 通过 


P{X <b} = lim, P{X <b—h} = ,lim, F(b—h) 


算出 这 个 概率 , 其 中 limn_.o+ 表示 是 在 h 递减 到 0 时 取 极 限 . 注意 P{X < 4b} 不 一 
定 等 于 F(b), 因为 F(b) 也 包括 X 等 于 5 的 概率 . 


2.2 ”离散 随机 变量 


正如 上 面 提 到 的 , 一 个 最 多 取 可 数 个 可 能 值 的 随机 变量 , 称 为 离散 的 . 对 于 一 个 


离散 随机 变量 X, 我 们 用 
plo) =P{X =a} 


定义 概率 质量 函数 p(a). 概率 质量 函数 p(a) 最 多 在 可 数 个 a 的 值 上 是 正 的 . 也 就 是 
说 , 如 果 X 必须 是 值 z1,x2,… 之 一 , 那么 

Dp(zi) > 0， 1 一 12…， 

p(z) = 0， 所 有 其 他 z 值 
因为 X 必须 取 zi 值 中 的 一 个 ， 所 以 有 


plzi)=1 
这 1 
累积 分 布 函数 FF 可 以 用 p(a) 表示 为 


Fa= 》 plzi) 
一 切 zi<a 


例如 , 假定 X 具有 由 
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p()=3, ?0)=3, (3)=3 


给 出 的 概率 质量 函数 , 那么 X 的 累积 分 布 函数 由 
a<l 
1<a<2 


Fla)= 
2<a<3 


上 leblr © 


3<a 


给 出 . 这 在 图 2.1 中 是 以 图 示 的 方式 出 现 的 . 
Fa 


bl- lw - 


1 2 学 
图 2.1 F(z) 的 图 
离散 随机 变 基 通常 依据 概率 质量 函数 分 类 . 我 们 现在 研究 一 些 这 样 的 随机 变 基 . 
2.2.1 ” 伯 努 利 随机 变量 
假定 一 个 试验 , 其 结果 可 以 分 为 成 功 或 者 失败 . 如 果 我 们 在 试验 的 结果 是 成 功 
时 令 X 等 于 1, 而 在 试验 的 结果 是 失败 时 令 X 等 于 0, 那么 X 的 概率 质量 函数 由 
p(0)=P{X=0}=1-p, 
7(1)=P{X=1}=7p 
给 出 , 其 中 p(0 < p < 1) 是 试验 的 结果 为 成 功 的 概率 . 
随机 变量 X 称 为 伯 努 利 随机 变量 , 如 果 其 概率 质量 函数 由 方程 (2.2) 给 出 , 且 
0<p<1. 
2.2.2 ”二 项 随机 变量 


假定 做 了 n 次 独立 试验 , 其 中 每 次 结果 为 成 功 的 概率 为 p, 结果 为 失败 的 概率 
为 1 一 p. 如 果 以 X 代表 出 现在 n 次 试验 中 的 成 功 的 次 数 , 那么 X 称 为 具有 参数 
(m,p) 的 二 项 (binomial) 随机 变量 . 


(2.2) 
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参数 为 (n,7p) 的 二 项 随机 变量 的 概率 质量 函数 由 


P(i) = ( a jza 一 P)" i=0,l,.,n (2.3) 


给 出 ,其 中 
ny_ nl 
( i ) (nl 
等 于 从 nn 个 对 象 的 集合 中 能 够 选 出 的 i 个 对 象 的 不 同 组 的 数目 . 方程 (2.3) 的 有 效 
性 可 以 这 样 验证 首先 注意 , 由 独立 性 假设, 一 个 包含 i 次 “成功 " 和 n 一 i 次 “ 拓 
败 " 的 n 个 结果 的 任意 一 个 特定 序列 的 概率 是 pi(1 一 p)"' 那么 方程 (2.3) 得 自 
一 共有 ( ”) 个 包含 i 次 成 功 和 nn 一 i 次 失败 的 n 个 结果 的 不 同 序列 . 例如 , 如 果 


n=3,i 一 2 那么 在 3 次 试验 中 得 到 2 次 成 功 共有 ( >) = 3 种 方式 . 即 3 个 结果 


(s,s, 下 ), (s, fs),(f,s,s) 中 的 任意 一 个 , 这 里 结果 (s, s, f) 表示 前 面 两 次 试验 都 是 成 
功 , 而 第 三 次 是 失败 . 因为 3 个 结果 (s,s, 了 ),(s,f,s),(f,s,s) 中 的 任意 一 个 出 现 的 


概率 都 是 (1 p), 因此 ,要 求 的 概率 是 (3 )p?(1 一 中， 
注意 , 由 二 项 式 定理 , 这 些 概率 加 起 来 是 1, 就 是 说 


D0) - 立 ( Joma —p)" -i=(p+(1-p)"=1 
i=0 i=0 

例 2.6 。 抛 搓 4 枚 均匀 的 硬币 . 假定 其 结果 都 是 独立 的 问 得 到 2 个 正面 、2 个 反面 

的 概率 是 多 少 ? 

解 ”让 X 等 于 出 现 正面 (“成功 ”) 的 数目 , 那么 X 是 参数 为 n = 4,p = 1/2 的 二 项 

随机 变量 . 因此 , 由 方程 (2.3) 


lo : 


例 2.7 已 知 某 机 器 生产 的 一 个 产品 是 废品 的 概率 为 0.1, 且 与 任意 的 其 他 产品 独 
立 . 在 三 个 产品 的 样本 中 , 至 多 有 一 个 废品 的 概率 是 多 少 ? 

解 ”假定 X 是 在 此 样本 中 废品 的 数目 , 那么 X 是 参数 为 (3, 0.1) 的 二 项 随机 变 其 
因此 , 要 求 的 概率 由 


P{X=0}+P{X=1}= ( > ) (0.1)°(0.9)3+ ( .| ) (0.1)1(0.9)2 = 0.972 。 国 


给 出 . 
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例 2.8 ”假定 在 飞行 中 , 飞机 发 动机 失效 的 概率 为 1 一 p, 而 且 各 发 动机 独立 地 工作 . 
假定 如 果 至 少 50% 的 发 动机 保持 运行 , 那么 飞机 就 能 完成 一 次 成 功 的 飞行 . 问 p 取 
什么 样 的 值 , 4 个 发 动机 的 飞机 比 2 个 发 动机 的 飞机 更 可 靠 ? 

解 ”因为 假定 每 个 发 动机 失效 或 者 运行 独立 于 其 他 的 发 动机 的 情形 , 由 此 推出 保 
持 运行 的 发 动机 的 个 数 是 二 项 随机 变 基 , 因此 , 4 个 发 动机 的 飞机 完成 一 次 成 功 的 
飞行 的 概率 是 


( 4 jza-m+ ( S )ra-nt+ ( in jza-m 


= 6p?(1 一 站 +4p3(1—p)+p 
而 2 个 发 动机 的 飞机 的 对 应 概率 是 


(Jpa-a+r( 2 Ja- 


因此 , 4 个 发 动机 的 飞机 更 安全 , 如 果 
6p?(1 —p)? +4p3(1—p)+p’ > 2p(1—7)+p? 
或 等 价 地 , 如 果 
6p(1 一 十 4p2(1 一 可 十 三 >2 一 了 
它 可 以 简化 为 
3p3 一 8p2+7p 一 2>0 或 pp-1)2(3p 一 2) >0 


这 等 价 于 


2 
3p-2>0 或 p>3 


因此 , 当 发 动机 成 功 的 概率 p 至 少 需 要 大 到 2/3 时 , 4 个 发 动机 的 飞机 更 安全 ， 
而 当 此 概率 p 低 于 2/3 时 , 2 个 发 动机 的 飞机 更 安全 . 国 
例 2.9 ”假定 一 个 人 的 特殊 特征 (例如 眼睛 的 颜色 或 有 左 撤 特 征 ) 是 以 一 对 基因 加 
以 区 分 的 . 假定 用 d 代表 显 性 基因 , 而 用 > 代表 隐 性 基因 . 从 而 一 个 有 dd 基因 的 人 
是 纯 显 性 ,有 rr 基因 的 人 是 纯 隐 性 , 而 有 rd 基因 的 人 是 混合 型 . 纯 显 性 与 混合 型 外 
貌 相像 . 孩子 从 父母 那里 各 得 到 一 个 基因 . 如 果 对 于 一 个 特殊 的 特征 , 混合 型 的 父 
母 共 有 4 个 孩子 . 问 其 中 恰 有 3 个 孩子 有 显 性 基因 的 外 貌 的 概率 是 多 少 ? 
解 ” 如 果 我 们 假定 每 个 孩子 等 可 能 地 从 父母 那里 遗传 一 个 基因 , 一 对 混合 型 的 父 
母 的 孩子 有 一 对 基因 dd、rr 或 rd 的 概率 分 别 为 1/4,1/4,1/2. 因为 一 个 后 代 有 显 
性 基因 的 外 貌 , 如 果 他 的 基因 对 或 是 dd 或 是 rd, 于 是 就 推出 这 样 的 孩子 的 个 数 是 
按 二 项 分 布 的 , 其 参数 为 (4,3/4). 从 而 所 求 的 概率 是 
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NA 
(8) (3) 公私 
术语 备注 ”如果 X 是 参数 为 (n,p) 的 二 项 随机 变量 , 那么 我 们 就 说 X 有 参数 为 
(mp) 的 二 项 分 布 . 
2.2.3 ”几何 随机 变量 
假定 进行 独立 试验 直到 出 现 一 个 结果 为 成 功 , 其 中 每 一 个 试验 成 功 的 概率 都 是 
p. 如果 我 们 以 X 记 直 到 出 现 首次 成 功 所 需要 做 的 试验 次 数 , 那么 称 X 为 具有 参数 
P 了 的 几何 随机 变量 . 它 的 概率 质量 函数 由 
=P{X=n}=(1-p)"!p, n=1,2,.… (2.4) 
给 出 . 方程 (2.4) 得 自 要 使 X 等 于 n, 其 充 要 条 件 是 前 n 一 1 次 试验 都 是 失败 , 而 第 
n 次 试验 是 成 功 . 方程 (2.4) 是 由 于 相继 的 试验 结果 假定 是 独立 的 . 
为 了 验证 p(n) 是 一 个 概率 质量 函数 , 我 们 注意 到 


> pm=p> (1-pn" :=1 
n=1 n=1 
2.2.4 ” 泊 松 随机 变量 
对 于 取 值 于 0,1,2,… 的 随机 变量 X, 如 果 对 于 某 个 入 > 0, 有 
pl() =P{X = -=e i=0,1,..: (2.5) 


则 称 X 为 具有 参数 和 nd | 


2 
所 以 方程 (2.5) 定义 了 一 个 祈 于 质量 于 才 泊 松 随机 变 基 在 不 同 的 数学 领域 有 广泛 
的 应 用 , 这 将 在 第 5 章 中 看 到 . 

泊 松 随机 变 基 的 一 个 重要 性 质 是 它 可 以 用 来 近似 二 项 随机 变 基 , 如 果 二 项 参数 
n 大 , 而 p 小 . 为 了 明白 这 点 , 假定 X 是 具有 参数 (n,p) 的 二 项 随机 变 基 , 并 取 
入 =np, 那么 1 


| ERY ps 
es i - p)™ = mo 人 (1-2) 
_ n(n -DnoitlD)X (Mn) 
mi 下 (二 XMF 
现在 , 对 于 大 的 nn 和 小 的 p 有 
AN a nD nitl) a 
Q(-3) Se (1-2) ~1 


ni 
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因此 , 对 于 大 的 n 和 小 的 p， 
P{X=i}% 3 
例 2.10 ”假定 在 书 的 一 页 上 的 印刷 错误 的 个 数 是 一 个 具有 参数 和 = 1 的 泊 松 随机 
变 基 . 计算 在 此 页 上 至 少 有 一 个 错误 的 概率 . 
解 t 
P{X>1}=1-P{X=0}=1-e!2%~0.632 mn 
例 2.11 ”假定 每 天 在 高 速 路 上 发 生 的 事故 的 数目 是 一 个 具有 参数 和 = 3 的 泊 松 随 
机 变 基 . 问 今 天 没有 发 生 事故 的 概率 是 多 少 ? 
解 
P{X=0}=e™ ?~0.05 图 
例 2.12 ”考察 计算 一 克 放 射 性 物质 在 一 秒 钟 内 释放 的 a 粒子 的 数目 的 试验 . 如 果 
我 们 已 知 平均 有 3.2 个 这 样 的 a 粒子 被 释放 . 出 现 不 多 于 两 个 a 粒子 的 近似 概率 是 
多 少 ? 
解 ” 如 果 我 们 将 这 一 克 放 射 性 物质 想象 为 是 由 n 个 原子 组 成 的 , 每 个 原子 以 概率 
3.2/n 分 解 并 且 在 随后 的 那 一 秒 中 释放 a 粒子 , 那么 我 们 看 到 a 粒子 的 数目 非常 近 
似 于 一 个 具有 参数 和 = 3.2 的 泊 松 随机 变量 . 因此 , 所 求 的 概率 是 


2 
P{X< 2}=e-32+3.2e-32 十 Besa ~ 0.380 mn 
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在 这 一 节 中 , 我 们 关心 的 随机 变 基 , 其 可 能 值 是 不 可 数 的 . 以 XX 记 一 个 这 样 
的 随机 变节 ， 我 们 说 X 是 一 个 连续 的 随机 变量 ,如果 存在 一 个 定义 在 所 有 实数 
ZE (00,00) 上 的 非 负 函数 f(z), 使 得 对 于 任意 实数 集合 B 有 性 质 


P{X eB}= 上 f(z)dz (2.6) 
函数 f(z) 称 为 随机 变量 X 的 概率 密度 函数 (probability density function). 


换 句 话 说 , 方程 (2.6) 说 明了 X 在 B 中 的 概率 可 以 由 概率 密度 函数 在 集合 B 
上 求 积分 得 到 . 因为 X 必须 取 某 个 值 , f(z) 必定 满足 


1=P{Xe (-oo,co)} = 网 f(z)dzr 


关于 X 的 所 有 概率 陈述 都 能 通过 f(z) 回答 . 例如 , 设 B = [a,4, 由 方程 (2.6) 我 们 
得 到 


P{ag X<0}= [aa (2.7) 
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如 果 我 们 在 上 面 设 a =b 那么 
P{X =a} = [rer =0 
换 句 话说 , 这 个 方程 说 明了 连续 随机 变量 在 假定 为 菜 个 特殊 值 时 的 概率 为 鹤 
累积 分 布 函数 F(.) 与 概率 密度 函数 /(.) 的 关系 表示 为 
Fl) =P{X el-o0,d} = ydz 


对 上 式 两 边 求 微分 就 得 到 
EF(0) = f(0) 

就 是 说 , 密度 函数 是 累积 分 布 本 数 的 导数 密度 画 数 的 一 个 更 为 直观 的 解释 可 以 由 

方程 2.7) 得 到 : 当 。 小 时 


2 


换 句 话说 , X 包含 在 点 a 附近 长 度 为 的 区 间 内 的 概率 近似 地 为 ef(a). 由 此 , 我 们 
明白 f(a) 是 随机 变量 在 a 附近 可 能 性 大 小 的 基 度 . 

有 几 个 重要 的 连续 随机 变量 常常 出 现在 概率 论 中 . 在 这 节余 下 的 部 分 就 致力 于 
某 些 这 种 随机 变量 的 学 习 . 


P{o- <Xs<a+ 引 = /arse 


2.3.1 ”均匀 随机 变量 
一 个 随机 变量 称 为 均匀 分 布 在 区 间 (0,1) 上 , 如 果 它 的 概率 密度 函数 给 定 为 
用 这 六 六 让 
站- 人 人 


注意 上 式 是 一 个 密度 函数 , 因为 f(z) > 0, 而 且 
oo 1 
全 f(s = | dr=1 
因为 只 当 z € (0,1) 时 f(z) > 0, 这 就 推出 X 必须 在 (0,1) 内 取 一 个 值 . 又 因为 对 
于 ze (0,1), f(z) 是 常数 , X 正好 等 可 能 地 在 (0,1) 中 的 任意 一 个 值 “附近 ". 要 验 
证 这 一 点 , 我 们 应 注意 , 对 于 任意 0< a <5< 1 


b 
Pfa< x <4=| f(z)dr =b—a 


换 句 话 说 , X 在 (0,1) 的 任意 特定 子 区 间 中 的 概率 等 于 该 子 区 间 的 长 度 . 
一 般 地 , 我 们 说 X 是 一 个 在 区 间 (a, B) 上 的 均匀 随机 变量 , 如 果 它 的 概率 密度 
函数 给 定 为 
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1 
-| a (2.8) 
0， 其 他 

例 2.13 ”计算 均匀 分 布 在 (as B) 上 的 随机 变量 的 标 积 分 布 函数 . 
解 。 因为 Flo) = | Tcjdz 由 方程 (28), 我 们 得 到 l 

0, asa 

F(a)= pr a<a<p 
网 a>p 图 


例 2.14 如 果 XX 均匀 分 布 在 (0,10) 上 , 计算 概率 (a) X < 3, (bl X > 7， 
li<X<t 


解 
3 
|=_ 3 
P{X < 3} = 二 = 和 
上 
dz 
P(X>7= 2 = 着 
1 
P{1<X<6}= = 国 
2.3.2 ”指数 随机 变量 


若 一 个 连续 随机 变 其 的 概率 密度 函数 给 定 为 , 对 于 某 个 入 > 0 


one 车 30 
:m=-{* 若 z<0 


则 称 其 为 具有 参数 和 的 指数 随机 变量 . 这 类 随机 变量 将 在 第 5 章 中 广泛 地 研究 , 所 
以 , 我 们 在 这 里 只 计算 其 累积 分 布 函 数 下 


F(a)= [ Me Ydr=1-e”, a>0 
0 
注意 Flco) = | Xe- 和 qz = 1 当然 , 必须 如 此 . 


2.3.3 ” 伽 马 随机 变量 
密度 函数 给 定 为 , 对 于 入 > 0,a > 0 
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Xe-xz(Az)a-1 
rm- 一 一， 若 z>0 


IT(o) 
0, 若 z<0 


的 连续 随机 变 基 , 称 为 具有 参数 和 a 的 名 马 随机 变量 Ta) 称 为 仙 马 画 数 , 它 定 
义 为 
T(a) = 三 
对 于 正 整数 a, 例如 a = n, 用 归纳 法 容易 证 明 
T(n)=(n—1)! 
2.3.4” 正 态 随机 变量 


我 们 说 X 是 具有 参数 /和 o? 的 正太 随机 变量 (或 简单 地 说 , X 是 正太 地 分 布 )， 


如 果 X 的 密度 由 
1 


f=- 质 
TO 
给 出 . 这 个 密度 函数 是 一 条 钟 形 曲 线 , 它 关于 .对称 ( 见 图 2.2). 


er-(z- 由 ?2/2o? 


-oo<Z<oco 


图 2.2 正 态 密度 函数 


正 态 随机 变量 的 一 个 重要 性 质 是 , 如 果 X 以 参数 上 和 o? 正 态 地 分 布 , 那么 
Y = aX +B 以 参数 ay +B 和 a?0? 正 态 地 分 布 . 为 了 证 明 它 , 先 假定 a > 0, 并 注 
意 随机 变量 Y 的 累积 分 布 函数 Fy(-) ?由 

(=P{Y <o} =Plax+8<o}=P {x < A}=r (54) 


a 


= 人 一 e-e-oz/aozdz 
jw Vio 

_p 1 -(v— (ap+ A) 

己 | 下 op{ 人 du (2.9) 


@ 当 考虑 多 个 随机 变量 时 , 我 们 以 Fz(-) 记 随 机 变量 2 的 累积 分 布 函数 , 类 似 地 , 我 们 将 2 的 密度 
记 为 fz("). 
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给 出 , 其 中 最 后 的 等 式 是 由 变量 替换 v = cz+B 得 到 的 . 因为 Fy(a) = [ fy(v)dv, 
由 等 式 (2.9) 推 得 概率 密度 函数 fy(-) 由 


5 而 他 一 (an 十 D)) 
fr(v)= yd {3 和) 一 oo < 的 oo 
给 出 . 因此 , Y 是 参数 为 ww+B8 和 (ao)? 的 正 态 分 布 . 类 似 的 结果 在 “<0 时 也 是 正 
确 的 . 
上 述 结果 的 一 个 推论 是 , 如 果 X 以 参数 上 和 o? 正 态 地 分 布 , 那么 Y = (X 一 
由 /0 以 参数 0 和 1 正 态 地 分 布 . 这 样 的 随机 变 其 Y 称 为 标准 正 态 分 布 或 单位 正 态 
分 布 . 


2.4 ”随机 变量 的 期 望 


2.4.1 离散 情形 
如 果 X 是 离散 随机 变量 , 具有 概率 质量 函数 p(z), 那么 X 的 期 望 值 定义 为 
EIX]= D5, zp(z) 


x:p(z)>0 
换 句 话说 , X 的 期 望 值 是 X 可 能 取 的 值 的 加 权 平均 , 每 个 值 被 X 取 此 值 的 概率 所 
加 权 . 例如 , 如 果 X 的 概率 质量 函数 给 定 为 
PCD =3 =7(%) 
那么 
EIX]=1 9 +2(§) 和 3 
从 是 人 了 的 了 个 可 能 人 1 和 2 的 一 个 肖 和 的 的 . 另 一 罗 , 如 


7(D)=3, 7(2)= 


wa) = 了 
是 两 个 可 能 值 1 和 2 的 一 个 加 权 平 均 , 其 中 值 2 的 权 是 值 1 的 两 倍 , 因为 p(2) = 
2p(1). 
例 2.15 求 E[X], 这 里 XX 是 毛 一 颗 均 匀 的 仙 子 的 结果 . 
解 ” 因 为 p(1) =p(2) =p(3) =p(4) =p(5) =p(6) = 1/6, 我 们 得 到 


DE TO 


那么 
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例 2.16( 伯 努 利 随机 变量 的 期 望 ) 当 X 是 参数 为 p 的 伯 努 利 随机 变 其 时 , 计算 
E[X]. 
解 ” 因 为 p(0) =1 一 pp(1) =p, 我 人 有 BIX] = 0G1 一 号 二 1(p) =p. 因此 ,在 一 次 试 
验 中 平均 成 功 的 次 数 正 是 成 功 的 概率 . 四 
例 2.17( 二 项 随机 变量 的 期 望 ) 当 X 以 参数 n 和 p 二 项 地 分 布 时 , 计算 EIX]. 
解 

sq Pw0 -( ) PG 一 Pr -m0 


(n—1)! 


人 Do 


=np) ( Ee )xa -Pp)" t=nplp+(1—p)"! 


这 里 倒数 第 三 个 等 式 来 自 令 上 =i 一 1. 因此 , n 次 独立 试验 的 平均 成 功 次 数 是 n 时 
以 一 次 试验 成 功 的 概率 . 

例 2.18( 几 何 随机 变量 的 期 望 ) 计算 参数 为 p 的 几何 随机 变 其 的 期 望 

解 ” 由 方程 (2.4), 我 们 得 到 


EIX]= Dnp(1-p)"!=pD ng 
I a 
其 中 g=1-p， 
,En | 
BX] -7 7") -7 (T) -rs 


用 文字 来 描述 就 是 , 直至 达到 首次 成 功 所 需 做 的 独立 试验 的 期 望 数 等 于 任意 一 次 试 
验 结果 是 成 功 的 概率 的 倒数 . 图 
例 2.19( 泊 松 随机 变量 的 期 望 ) 计算 E[X], 如 果 X 是 参数 为 的 泊 松 随机 变量 . 
解 ”由 方程 (2.5), 我 们 有 


ie 一 A! 
网 = 3 rn ey 


i=0 


=Xe* Ss 3 =MNe*e*=A 
k=0 


这 里 我 们 用 了 恒等式 了 Ro 入/k! = 国 
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2.4.2 ”连续 情形 


我 们 也 可 以 定义 连续 随机 变量 的 期 望 值 . 如 果 X 是 具有 概率 密度 函数 f(z) 的 
连续 随机 变 基 , 那么 X 的 期 望 值 就 定义 为 


ED=| vaz ， 


例 2.20( 均 匀 随 机 变量 的 期 望 ) ”计算 均匀 分 布 在 (a, 8) 上 的 随机 变 基 的 期 望 
解 ”由 方程 (2.8), 我 们 有 


I 
sp= | PE 


换 句 话说 , 在 (a, 8) 上 均匀 分 布 的 随机 变 基 的 期 望 值 正 是 区 间 的 中 点 . 图 
例 2.21( 指 数 随机 变量 的 期 望 ) 如 果 X 是 参数 为 和 的 指数 随机 变量 , 计算 E[X]. 
解 


B PP-o Bta 
a 


oo 
E[X] -| TMe Ydzr 
0 


用 分 部 积分 (dv = Xe-*Ydz,u = z,u = -exz) 得 到 


Oo 一 和》z 
soqd= -ze 人 +| edz=0- 所 = 上 
0 0 


例 2.22( 正 态 随机 变量 的 期 望 ) X 是 参数 为 人 和 o? 的 正 态 随机 变 基 , 计算 E[X]. 
解 


Wt 2 2 
re-(z-2/2c2d7 


将 z 写 为 (z 一 各 十 几 得 到 


1 _ 产 aaoa 1 人 2 202 
i 一 Je-E-mz/2ozdz 十 | (2—p)?/207 dy 
[X] a | ec We rp x 
令 y=Zz 一 ,得 到 
EIX]= -- 三 ew /207 dy 十 | ~ f(a)dr 
= | y 十 
V2no J_w -08 


其 中 f(z) 是 正 态 密度 函数 . 利用 对 称 性 , 第 一 个 积分 必定 为 0, 所 以 


EI=4| fr = n 
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2.4.3 ”随机 变量 的 函数 的 期 望 


假定 我 们 现在 已 知 随机 变量 X 和 它 的 概率 分 布 ( 即 在 离散 情形 是 它 的 概率 质 
基 函 数 , 或 者 在 连续 情形 是 它 的 概率 密度 函数 ). 假定 我 们 致力 于 计算 的 不 是 X 的 
期 望 值 , 而 是 X 的 某 个 函数 [例如 9(X)] 的 期 望 值 . 我 们 将 怎样 做 呢 ? 方法 如 下 . 因 
为 9(X) 本 身 是 一 个 随机 变量 , 它 必 有 一 个 概率 分 布 , 它 可 以 从 X 的 分 布 的 知识 算 
出 . 一 旦 我 们 有 了 g(X) 的 分 布 , 我 们 就 能 从 期 望 的 定义 计算 Elg(X)]. 
例 2.23 ”假定 X 有 如 下 的 概率 质量 函数 
p(0)=0.2, p() =0.5， p(2) = 0.3 
计算 EX9]， 
解 ” 令 Y=X?, 因 此 ,Y 是 随机 变量 , 它 分 别 以 概率 
py(0) =P{Y = 0?} = 0.2 
py(1)=P{Y=12} = 0.5 
py(4) =P{Y = 22} = 0.3 
取 0?, 12, 22 中 的 一 个 值 . 因此 ， 
E[X?] = E[Y] = 0(0.2) +1(0.5) + 4(0.3) = 1.7 
注意 
1.7= E[X?] # (E[X])? = 1.21 图 
例 2.24 假定 X 在 (0, 1) 上 均匀 分 布 . 计算 E[X 引 . 
解 ” 令 Y=X3, 我 们 计算 了 的 分 布 如 下 ,其 中 0<a<1， 


Fy(a) =P{Y < a} =P{X? < a} =P{X <al/3}=a!/3 
其 中 最 后 的 等 式 是 由 于 X 在 (0, 1) 上 是 均匀 分 布 的 . 对 Fy(a) 求 微分 , 我 们 得 到 了 
的 密度 , 即 
充 扣 至 了， o<ax<l 
因此 1 
EIX3]= ElY] = | a [ aa-2/ada 


上 13 1 1 
=$] e330 | = 上 
尽管 上 述 的 常规 做 法 在 理论 上 总 能 使 我 们 由 X 的 分 布 的 知识 计算 出 X 的 任 

意 函 数 的 期 望 , 但 幸运 的 是 , 我 人 有 一 个 更 容易 的 方法 ， 下 面 的 命题 说 明了 我 们 如 


何 无 须 确定 9(X) 的 分 布 就 能 计算 它 的 期 望 . 
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命题 2.1 (a) 如 果 X 是 离散 随机 变量 , 有 概率 质量 函数 p(z), 那么 对 于 任意 实 值 
函数 9 


Elg(CX)]= 5, g(z)p(z) 


z:p(z)>0 


(b) 如 果 XX 是 连续 随机 变量 , 有 概率 密度 函数 f(z), 那么 对 于 任 意 实 值 函数 g 
ECOI= | sto7Godz 四 


例 2.25 ”将 命题 应 用 于 例 2.23, 就 得 到 
E[X?] = 02(0.2) + (12)(0.5) + (22)(0.3) = 1.7 
这 当然 符合 例 2.23 中 推导 出 的 结果 . 国 
例 2.26 ”将 命题 应 用 于 例 2.24, 就 得 到 
Bx = | ar (由 于 f(z)=1,0<z<1) 
0 


} n 
命题 2.1 的 一 个 简单 的 推论 如 下 . 
推论 2.2 ”如 果 a 和 b 都 是 常数 ,那么 
ElaX +b] = aE[X]+b 
证 明 ”在 离散 情形 


ElaX +4]= p> (az 十 bp(z) 
z:p(z)>0 


=a D, zp(z)+b 》， p(z) 


z:p(z)>0 z:p(z)>0 

=aE[X]+b 

在 连续 情形 
ElaX +0]= | (az 十 bf(z)dz 
一 a zf(z)dr+ so f(z)dz 
=aE[X]+b [| 
随机 变量 X 的 期 望 值 E[X] 也 称 为 均值 (mean) 或 X 的 一 阶 和 矩 . E[X"],n > 1， 

称 为 区 的 n 阶 起. 由 命题 2.1, 我 们 注意 到 
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zrp(z)， 若 X 是 离散 的 
E[X"] = z:p(z)>0 


| wf)dz， 荐 X 是 连续 的 


我 们 感 兴趣 的 另 一 个 基 是 随机 变量 的 方差 , 记 为 Var(X), 它 定义 为 
Var(X) = E[(X -ED 
从 而 , X 的 方差 度量 了 X 与 其 期 望 值 之 间 的 偏差 平方 的 期 望 . 
例 2.27( 正 态 随机 变量 的 方差 ) ” 设 X 是 参数 为 人 和 o? 的 正 态 随机 变量 . 
Var(X). 
解 ” 回 想到 E[X] = (参见 例 2.22), 我 们 有 
Var(X)= E[(X 一 中 3 
= 二 [ (2 — 1)2e- (en)/20 dy 


-并 
用 变量 y = 一 * 替换 得 到 


o 


用 分 部 积分 (w= y,dv = ye-Y/?dy) 给 出 


2 


Var(X) = [上 2e-v /2d 
-Es a y 
Var(X)= 后 ( — ye-y /2 


中 三 e/ay) 
= 把 厂 erw /2dy i 
Var(X) 的 另 一 个 推导 将 在 例 2.42 中 给 出 . 
假定 X 号 连续 的 , 具有 密度 f, 并 且 记 E[X] = 几 那么 


Var(X)= EI(X -由 = ELX? — 2uX 十/ 


1 


= 2+ /ae 


= EE: Z2jf(z)dz — 2 [上 zf(z)dr +p2 三 f(z)dr 
=EX] -2pp4+ 12 = EX -pp 
类 似 的 证 明 在 离散 情形 仍然 有 效 , 所 以 我 们 得 到 一 个 有 用 的 恒等式 
Var(X) = EEC — (E[X])’ 
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例 2.28 如果 X 代表 掷 一 颗 均 匀 的 般 子 的 结果 , 求 Var(X). 
解 ”如 前 面 例 2.15 所 注 , E[X] = 7/2. 也 有 


E[IX3 =1 全 十 22 全 十 32 (3) 十 42 全 十 52 全 十 62 全 = (91) (8) 
国志 91 /7\*_35 1 
v= 号-( 引 = 时 


2.5 ”联合 分 布 的 随机 变量 


2.5.1 联合 分 布 函 数 


至 今 我 们 所 关注 的 都 是 单个 随机 变 基 的 概率 分 布 . 然而 , 我 们 常常 对 于 两 个 或 
多 个 随机 变量 的 概率 陈述 感 兴趣 ， 为 了 处 理 这 样 的 概率 , 对 于 任意 两 个 随机 变量 
X 和 了 ,我们 定义 X 和 YY 的 联合 累积 概率 分 布 函 数 (joint cumulative probability 
distribution function) 为 


F(ab)=P{X SaY <b)}, -oo0<ab<o 
X 的 分 布 可 以 由 X 和 了 的 联合 分 布 得 到 
Fx(a)=P{X <a}=P{X < a,Y < 0%} = F(a,o%0) 
类 似 地 , Y 的 累积 分 布 函数 为 
Fy(b) =P{Y < b} = F(00,b) 
在 X 和 Y 都 是 离散 随机 变 基 的 情形 , 方便 地 定义 X 和 了 的 联合 概率 质量 函数 为 
Pp(z,y) =P{X=7,Y =Y)} 
X 的 概率 质量 函数 可 以 由 p(z,y) 给 出 , 为 


px(z)= > pz,y) 
y:p(z,y)>0 
类 似 地 
pr(y)= > pz,y) 
z:p(z'y)>0 


我 们 说 X 和 Y 联合 地 连续 (jointly continuous), 如 果 存 在 一 个 对 于 所 有 的 实数 
Zz 和 vy 定义 的 函数 f(z,y), 对 于 所 有 的 实数 集合 4 和 B 满 足 


P{XE€A,Y EB}= | | f(z,y)drdy 


函数 f(z,y) 称 为 X 和 了 的 联合 概率 密度 函数 . X 的 概率 密度 函数 可 以 由 f(z,y) 
的 知识 用 如 下 的 推理 得 到 : 
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P{X € A} =P{X € A,Y € (-00,00)} = | 上 Fleadzdty= | fx(z)dz 


其 中 时 

Pa=| feay 

就 是 X 的 概率 密度 本 数 类似 地 , Y 的 概率 密度 函数 为 
t=| feewar 


因为 对 a pb 
F(a,b)=P(X <a,Y < 6b) | | f(z,y)dydzr 


微分 就 得 到 


d2 
aa， b) = f(a,b) 


所 以 , 同 单 变量 情形 一 样 微分 概率 分 布 函数 就 得 到 概率 密度 函数 
命题 21 的 一 个 引申 手术 为 , 如 果 X 和 Y 都 是 随机 变量 , 而 9 是 一 个 双 变革 本 
数 那么 
DD 9(z,y)plz,y)， 离散 情形 
Elg(X,Y)] = I rm 
[上 slewf(evwaray， 连 续 情 形 
例如 , 如 果 g(X,Y) = X +Y, 那么 在 连续 情形 


sx+y=] | e+ wary 


=| fwaray+] weardy 
= E[X] + E[Y] 
此 处 第 一 个 积分 根据 命题 21 的 引申 用 g(z,y) = z 赋值 而 第 二 个 用 gz) = 
同样 的 结果 在 离散 情形 仍然 有 效 . 结合 2.4.3 节 中 的 推 沦 , 对 于 任意 常数 a 和 4 


4 


得 到 
ElaX + bY] = aE[X] + bE[Y] (2.10) 


对 于 个 随机 变量 , 也 可 以 如 n = 2 一 样 地 定义 联合 概率 分 布 , 我 们 将 它 作为 
练习 留 给 读者 . 方程 (2.10) 所 对 应 的 结果 馆 述 为 , 若 X1,…, Xn 是 n 个 随机 变量 ， 
那么 对 于 个 常数 a1,…,an 有 


Elal Xi + azX2 十 .… 十 anXn] = alELX] + a2E[X2] 十 … 十 anE[Xn] (2.11) 


例 2.29 ” 掷 三 颗 均匀 的 人 般 子 , 计算 其 期 望 和 - 
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解 ”以 X 记得 到 的 点 数 和 . 那么 X = X1 + Xo + Xs, Xi 代表 第 i 个 骨 子 的 点 数 . 
因而 
21 


EIX] = E[Xi] + ELX2] + E[X3] =3 人 = 全 四 


例 2.30 ”作为 方程 (2.11) 应 用 的 另 一 个 例子 , 我 们 用 它 得 到 具有 参数 为 和 了 的 
二 项 随机 变 基 的 期 望 . 回想 到 随机 变量 X 代表 n 次 试验 中 成 功 的 数目 , 每 次 试验 
结果 是 成 功 的 概率 为 p. 我 们 有 
X=X1+ Xt + Xn 

其 中 

x=l 1 如 果 i 次 试验 成 功 

0， 如 果 i 次 试验 失败 
因此 , Xi 是 伯 努 利 随机 变 其, 有 期 望 ELXi] = 1(p) +0(1 一 p) =p. 从 而 
E[X] = E[X1] + E[X2]+:…+E[Xn] = mp 

这 个 推导 应 与 例 2.17 中 介绍 的 推导 做 比较 . 国 
例 2.31 在 一 次 聚会 上 , N 个 人 将 帽子 扔 到 房间 的 中 央 . 帽子 混杂 了 以 后 , 每 个 人 
随机 地 取 一 个 . 求 取 到 自己 的 帽子 的 人 的 期 望 数 . 
解 以 X 记 取 到 自己 的 帽子 的 人 数 . 我 们 最 好 通过 和 = Xi 十 … 十 X 计算 E[X]， 


其 

入 -人 1， 第 ;个 人 取 到 自己 的 由 了 
' 【0， 其 他 情形 

现在 , 因为 第 ; 个 人 等 可 能 地 在 N 个 帼 子 中 到 一 个 , 这 就 推出 


PUG = 1}= P( 第 ;个 人 取 到 自己 的 帽子 ) = 二 


随 之 
ED =1P{Xi=1}+0P{Xi=0} = 
因此 , 由 方程 (2.11) 我 们 得 到 

E[X] = ELX1] +.…+ E[XN] = (为 ) N=1 


因此 , 无 论 聚会 上 有 多 少 人 , 平均 总 有 一 人 取 到 自己 的 帽子 . 加 
例 2.32 ”假定 有 25 种 不 同类 型 的 奖券 , 而 且 每 次 等 可 能 地 得 到 25 种 中 的 一 张 . 计 
算 包含 在 10 张 一 套 中 不 同 的 类 型 数 的 期 望 

解 ”以 X 记 包含 在 10 张 一 套 中 不 同类 型 奖券 的 数目 , 用 如 下 表达 式 计算 E[X]. 


= 
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其 中 
太一 人 1， 至少 一 张 类 型 的 奖券 在 10 张 一 套 中 
” 【0， 其 他 情形 


下 ED=P{X 一 1 


二 P( 至 少 一 张 类 型 i 的 奖券 在 10 张 一 套 中 ) 
二 1 一 P( 没 有 类 型 i 的 奖券 在 10 张 一 套 中 ) 


10 
-1-( 芭 ) 
25 


这 里 最 后 的 等 式 得 自 10 张 奖券 的 每 一 张 (独立 地 ) 以 概率 24/25 不 是 i 类 . 因此 


E[X] = E[X1] 十，…: 十 E[Xas] = 25 - (2) ] -sa 四 
2.5.2 ”独立 随机 变量 
随机 变革 X 和 Y 称 为 独立 的 , 如 果 对 于 一 切 a,b 
P{X<aY <b}=P{X <a}P{Y <b} (2.12) 


换 句 话说 , X 和 了 是 独立 的 , 如 果 对 于 一 切 a,b 事 件 Eo。={X<a} 与 ={Y < 5b} 
独立 . 
利用 X 和 YY 的 联合 分 布 函 数 F, 我 们 有 , X 和 Y 是 独立 的 , 如 果 


F(a,b) = Fx(a)Fy(b) ”对 于 一 切 a,b 成 立 
当 XX 和 YY 都 是 离散 时 , 独立 的 条 件 简化 为 


p(x,y) = px(z)py (y) (2.13) 
而 如 果 X 和 YY 联合 地 连续 , 独立 性 简化 为 
f(z,y) = fx(z)fy(y) (2.14) 


为 了 证 明 这 个 论述 ; 首先 考察 离散 情形 , 并 假定 联合 概率 质 其 函数 p(z,y) 满足 方程 
(2.13). 那么 


P{X<aY <b}=5 p(y) = DD 


ybrsa y<brsa 
=D py(y) Dpx(z) = P{Y < b}P{X <a} 
y<b rga 


所 以 XX 和 YY 是 独立 的 .方程 (2.14) 蕴涵 了 连续 情形 的 独立 性 可 用 同样 的 方式 证 明 ， 
现 将 它 留 给 读者 . 
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关于 独立 性 , 有 如 下 重要 结果 . 
命题 2.3 若 X 和 了 是 独立 的 , 那么 对 于 任意 函数 9 和 六 
BIg )hO)] = BlgCOJEIC 
证 明 假定 X 和 了 联合 地 连续 ,那么 
sloCon = ote warey 
=[ [snorerey 
=[ rtpv way| glofx (eae 


= E[h(Y)]E[g(X)] 
在 离散 情形 的 证 明 类 似 . 晤 
2.5.3 ” 协 方差 与 随机 变量 和 的 方差 


任意 两 个 随机 变 基 X 与 Y 的 协 方差 记 为 Cov(X,Y), 定义 为 
Cov(X,Y)= E[(X — E[X])(Y — E[Y])] 
= E[XY — YE[X] — XE[Y] + E[X]E[Y)] 
= E[XY] ~ E[Y]E[X] ~ E[X]E[Y] + E[X]E[Y] 
= E[XY] — E[X]E[Y] 
注意 , 若 X 与 了 独立 , 则 由 命题 2.3 推出 Cov(X,Y) = 0. 
现在 让 我 们 考虑 特殊 情形 , 其 中 X 与 Y 分 别 是 事件 4 与 B 是 否 发 生 的 示 性 
函数 , 定义 


{ 1， 若 4 发 生 r-{ 1， 若 B 发 生 
0， 其 他 情形 0， 其 他 情形 
那么 
Cov(X,Y) = E[XY] - E[XJE[Y] 
而 且 , 因为 XY 按 X 与 了 是 否 都 发 生 而 等 于 1 或 0, 我 们 看 到 
Cov(X,Y)=P{X=1,Y=1}-P{X=1}P{Y =1} 


由 此 我 们 看 到 
Cov(X,Y)>02P{X=LY=1}>P{X=1}P{Y =1} 
全 i >P{Y =1} 


SP{Y=1X=1}>P{Y=1} 
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就 是 说 , 如 果 结 果 X= 1 使 Y= 1 更 可 能 , 则 X 和 了 的 协 方差 为 正 (由 对 称 性 容 
易 看 出 这 也 蕴涵 其 逆向 ). 

一 般 地 , 可 以 证 明 Cov(X,Y) 取 正 值 是 表明 在 X 增加 时 , Y 倾向 于 增加 , 而 负 
值 表明 在 X 增加 时 , Y 倾向 于 减少 . 
例 2.33 X,Y 的 联合 密度 函数 是 


f(z,y) = Se th), 0<zy<o0 
(a) 验证 上 述 函 数 是 联合 密度 函数 . 


(b) 计算 Cov(X,Y). 
解 ” 为 了 证 明 f(z,y) 是 联合 密度 函数 , 我 们 必须 证 明 它 是 非 负 的 (这 立即 可 得 ), 而 


且 | [resmadz =1 后 者 的 证 明 如 下 ， 


_ ay 
| [ename = | se eae 
-Ek be 
= | eydy=1 
0 
为 了 计算 Cov(X,Y), 注意 到 Y 的 密度 函数 是 
=e | behar=er 
因此 , Y 是 参数 为 1 的 指数 随机 变 基 , 从 而 ( 见 例 2.21) 
ElY]=1 
E[X] 和 E[XY] 的 计算 如 下 : 
E[X] = B, |: zf(z,y)dydz = | ey . Fe "vdzdy 
因为 | De hdr 是 参数 为 1/y 的 指数 随机 变量 的 期 望 值 , 所 以 它 等 于 y. 从 而 有 
E[X] = 上 ye ydy=1 
0 


oo oo 
ER-=| | vf, weyde 
oa oo 
-| ze 二 e-z/ydzdy -| 22e-ydy 
0 oy 0 


分 部 积分 (dv = e ydyu= 妨 ) 得 
入 
ELXY] = | yeray= yes) + | 2ye-vdy = 2E[Y] =2 
0 0 
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因此 ， 
Cov(X,Y) =EIXZ — EIX]JE[Y] =1 上 
以 下 是 协 方差 的 一 些 重要 的 性 质 . 
协 方差 的 性 质 
对 于 任意 随机 变量 X,Y, 2 和 常数 c, 4 
(1) Cov(X,X) = Var(X), (2) Cov(X,Y) = Cov(Y, X), 


(3) Cov(cX,Y) = cCov(X,Y), (4) Cov(X,Y +2)= Cov(X,Y)+ Cov(X,2). 
前 三 个 性 质 是 显然 的 , 最 后 一 个 容易 证 明 , 如 下 
Cov(X,Y +2)=E[X(Y + 2)] — EIXJE[Y + 2] 
=E[XY] — E[X]E[Y] + EL[X2] — E[XJE[2] 
= Cov(X,Y)+ Cov(X,2) 
容易 将 第 四 个 性 质 推广 , 给 出 如 下 结果 
co (Px) = coro) (2.15) 
i=1 j=1 i=1 j=1 
可 由 公式 (2.15) 生生 相机 作 于 全 一人 有 网 的 生生 和 
va (PX) = cn (Ds) -> oo (Xi, X;) 
i=1 


二 1 j=1 
n 


= DCov(Xi, Xi) + co (Xi, Xi) 


i=1 i=1 j#i 


-> Var(X) +25 5 Cor( Xi, Xj) (2.16) 


i=1l i=l j<i 


如 果 Xi(i = 1,…,n) 是 独立 随机 变量 , 那么 公式 (2.16) 化 简 为 
Var (sx) = Svar(x, ) 
i=1 i=1 


定义 2.1 ”车 X1,…,Xn 是 独立 同 分 布 的 , 则 随机 变量 这 = 于 蕊 ; Xi/n 称 为 样本 
均值 (sample mean). 

下 面 的 命题 说 明 样 本 均值 与 样本 均值 的 偏差 间 的 协 方差 是 0. 它 在 2.6 节 中 会 
用 到 . 
命题 2.4 ”假定 X1,…,Xn 是 独立 同 分 布 的 , 具有 期 望 值 几 与 方差 02, 那么 

(a) E[X] = py, (b) Var(X)=0?/n, (c) Cov(X, Xi—X)=0,i=1,.…,n 
证 明 (a) 和 (b) 容易 证 明 , 如 下 
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四 = 二 EDG = 
i=1 


¥ 2 n 1 2n 2 
Var(X)= © “(3x) = 人 PV) = 元 
我 们 作 如 下 推理 以 证 明 (c): 
Cov(X, Xi—X)= Cov(X Xi) — Cov(X,X) 


1 A 
总 lc (x 十 Dx x) — Var(X) 
j#i 
=le (X. Xi) + 16 DX rt 
= Cov(Xu Xs pe Xi 


其 中 倒数 第 二 个 等 式 用 到 了 Xi 与 沁 jy; Xi 是 独立 的 , 因而 协 方差 为 0. 图 
公式 (2.16) 在 计算 方差 时 常常 很 有 用 . 
例 2.34( 二 项 随机 变量 的 方差 ) ”计算 参数 为 n 和 了 的 二 项 随机 变量 X 的 方差 . 
解 ”因为 这 样 的 随机 变 基 表示 在 n 次 独立 试验 中 成 功 的 次 数 , 其 中 每 次 试验 有 相 
同 的 成 功 概率 p, 所 以 可 以 写 出 
和 = 后 十 十 和 

其 中 Xi 是 独立 的 伯 努 利 随机 变 基 , 即 

x=lb 如 果 第 i 次 试验 成 功 

“ 0， 其 他 情形 

因此 , 由 公式 (2.16) 我 们 得 到 

Var(X) = Var(X1) 十 … 十 Var(Xn) 


四 Var(Xi) = E[X?] — (E[X])* 
‘ = 了 [Xi 一 (ELIX)? 因为 X? = Xi; 
=D 一 2 
故 有 
Var(X) = mp(1 一 D). 图 


例 2.35( 从 有 限 总 体 中 抽样 : 超 几 何 分 布 ) ”考虑 一 个 有 N 个 人 的 总 体 , 他 们 中 一 
些 人 物 同 某 个 提议 . 特别 假定 他 们 中 的 Np 个 人 赞同 , 而 N 一 Np 个 人 反对 , 这 里 假 
定 bp 未知. 我 们 关心 的 是 通过 随机 地 选取 并 确定 总 体 中 n 个 成 员 的 态度 , 从 而 估计 
总 体 中 赞同 这 个 提议 的 人 员 的 比率 p. 
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如 前 面 描述 的 这 种 情形 , 通常 用 被 取样 的 总 体 中 赞同 这 个 提议 的 比率 作为 ?的 
估计 . 因此 , 如果 我 们 记 
Sd { 1， 如 果 第 ;个 选 到 的 人 赞同 
” 【0， 其 他 情形 
那么 p 通常 的 估计 是 于 全， Xi/n. 现在 计算 它 的 均值 与 方差 。 ， 


E 去 | = Sex =np 


其 中 最 后 一 个 等 式 是 由 于 被 选 的 第 i 个 人 等 可 能 地 为 总 体 的 N 个 人 中 的 任意 一 个 ， 
因而 属于 物 同 者 的 概率 为 Np/N. 


Var (<)- 于 (C0) +2 5 Cov(Xi, x)) 
i=1 


i=1 i<j 
现在 , 因为 Xi 是 均值 为 的 伯 努 利 随 机 变 基 , 由 此 推出 
Var(Xi) =P( —7) 
同样 , 对 izj 
Cov(Xi, Xi) = E[XiX;] — E[Xi]E[X;] 
=P{Xi=1,X;=1}-p 
=P{Xi=1}P{X;=1|X:=1}-p 
_ Np(Np-1) = 次 
NN-1 
其 中 最 后 的 等 式 是 由 于 , 如 果 被 选 的 第 i 个 人 为 赞同 者 , 那么 被 选 的 第 j 个 人 将 与 
其 他 N - 1 个 人 等 可 能 地 在 Np 一 1 个 赞同 者 之 中 . 因此 , 我 们 看 到 


va (DX) -m0 n+? 和 ) -可 


n(n— 7 —p) 


=np(1—7)— 二 了 
所 以 , 我 们 估计 的 均值 和 方差 为 
: 愉 引 - 
i=1 
怠 : -Pp)_ (n— lp(1—p) 
Yet 这 引 - n(N—1) 


注意 , 因为 估计 的 均值 是 未 知 参数 p, 我 们 希望 它 的 方差 尽量 地 小 ，( 这 是 为 什么 ?) 
而 且 由 前 面 我 们 知道 , 作为 总 体 大 小 N 的 函数 , 当 NN 增 大 时 方差 增 大 . 当 N 一 co 
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时 , 方差 的 极限 值 是 p(1 一 p)/n, 它 并 不 令 人 惊讶 , 因为 当 N 大 时 每 一 个 Xi 将 近似 
地 是 独立 随机 变 基 , 从 而 :1 Xi 近似 地 是 参数 为 n 和 了 的 二 项 分 布 . 

随机 变量 i Xi 可 以 设想 为 表示 从 含有 Np 个 白 球 和 N - Np 个 黑 球 的 总 
体 中 , 随机 地 选取 n 个 球 所 得 到 的 白 球 数 . (将 一 个 人 赞同 这 个 提议 标识 为 白 球 , 而 
反对 这 个 提议 标识 为 黑 球 .) 这 个 随机 变量 称 为 起 几何 的 (hypergeometric), 并 且 有 


概率 质量 函数 
eg 
大 n—k 
P 位 Xi= 二 人 国 
n 
当 随 机 变量 X 和 了 独立 时 , 能 从 X 和 了 的 分 布 计算 出 关 十 Y 的 分 布 , 这 一 
点 常常 很 重要 . 首先 假定 X 和 YY 都 是 连续 的 , X 有 概率 密度 f, Y 有 概率 密度 g. 


记 和 +Y 的 累积 分 布 函数 为 Fx+y(a) ,我们 有 
Fxry(aj=P{X+Y<do 


= aletndady 


= retary 
三 | 人 gay 


= 人 me-nowuw Ga7) 


累积 分 布 函数 Fx+y 称 为 分 布 Fx 和 Fy( 分 别 是 X 和 了 的 累积 分 布 函数 ) 的 郑 
积 (convolution). 


对 (2.17) 式 求 微分 ,我 们 得 到 X +Y 的 概率 密度 fxty(a) 为 
frer(@= 训 [Fre -weay 


= Fx-w)oay Ca 


= f@ -weay 


例 2.36( 两 个 独立 的 均匀 随机 变量 的 和 ) ”如 果 X 和 Y 是 独立 的 随机 变量 , 两 者 都 
均匀 地 分 布 在 (0,1) 上 , 计算 六 十 Y 的 概率 密度 . 
解 因为 
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1, 0<a<l 
mo-oo-{ 0， 其 他 
由 公式 (2.18) 得 到 
fx+r (a) = [ fla— Way 
由 此 导出 ,对 于 0<ag1 
Prra=| =e 
对 于 1<a<2, 我 们 得 到 


1 
fxrr(o) =| = 


因此 
a, Osgagl 
fx+r(a) = 2-a 1<a<2 
0, 其 他 a 


我 们 不 继续 推导 在 离散 情形 下 X +Y 的 分 布 的 一 般 表达 式 , 而 是 考察 一 个 例 


子 . 
例 2.37( 独 立 泊 松 随机 变量 的 和 ) ”假定 X 和 Y 是 独立 的 泊 松 随机 变量 , 分 别 具 有 
均值 入 和 Xz. 计算 X 十 Y 的 分 布 . 
解 ”因为 事件 {X+Y =n} 可 以 写成 不 交 事 件 {X =k,Y =n 一 上 (0<k<n) 的 
并 , 所 以 有 有 
P{X+Y=n}=D_P{X=k,Y =n—k} 
k=0 


= P(X = 有 Pp{Y =n- 则 
k=0 


% 一 大 
2 De Ne 入 
k=0 (n=—A)! 


= e-(N+X2) 和 MN 
Kn -A)! 


e-Ca+ya) 
= Qt+%)" 


换 句 话说 , X + Y 有 均值 为 和 1 十 Xz 的 泊 松 分 布 . 国 
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当然 , 独立 性 概念 可 以 推广 到 多 于 两 个 随机 变量 的 情况 . 一 般 地 , n 个 随机 变量 
X1,X2,… ,Xn 称 为 独立 的 , 如 果 对 于 所 有 的 值 a1,4a2,…,an 有 
P{X < a1, X2 < a2,:**, Xn < an} =P{X1 < a1}P{X2 < a2}:*:P{Xn < an} 
例 2.38 ” 令 入 ,…, Xn 是 独立 同 分 布 的 连续 随机 变量 , 具有 概率 分 布 F 和 密度 
函数 F' = f. 如 果 以 X(i;) 记 这 些 随机 变量 中 第 i 个 最 小 的 值 , 那么 X01), X(2),……， 
XX(n) 称 为 次 序 统计 量 (order statistics) . 为 了 得 到 X(i) 的 分 布 , 我 们 注意 X(i) 小 于 
或 等 于 > 当 且 仅 当 这 n 个 随机 变量 X1,… ,Xn 至 少 有 i 个 小 于 或 等 于 z. 因此 ， 


P{Xo < z} = ( ) (F(z)*(1— F(z))"—* 
k=i 
微分 可 得 Xi) 的 密度 函数 如 下 
jx =f(7) ( % ) K(F(z))*-1(1 — F(z))"—* 
k=i 


-f(z) ( ) 外 一 有 (Fe))*GL — Fz))n-e1 


k=i 


nl! 本 3 
=f) mR QFP 


n-l 


-1 加 m0 Po) 
2 1 


开 _ 呈 
-OD om 1(1— F(z))"—* 

nl Ee 本 

-1 > mm 0 Fe) 


= Pe) 
上 面 的 密度 十 分 直观 , 因为 为 了 使 X 等 于 zn 个 值 X1,…,X 中 的 i 一 1 个 必须 
小 于 zn 一 i 个 必须 大 于 z 而 且 有 一 个 必须 等 于 zx. 现在 , 对 于 指定 的 i 一 1 个 入) 
的 每 个 成 员 痢 小 于 z, 指定 另外 的 n 个 X) 的 每 个 成 员 都 大 于 z, 而 余下 的 值 等 
于 = 的 概率 密度 是 (PCz))i-1(1 F(z))"-j(z). 于 是 , 由 于 n 个 随机 变 二 分 成 这 样 
三 组 的 不 同 划分 数 为 1/[(i - D)!(n 一 ,我 们 就 得 到 上 面 的 密度 本 数 . 四 
2.5.4 “随机 变量 的 函数 的 联合 概率 分 


令 Xi 和 X2 是 联合 地 连续 的 随机 变量 , 具有 联合 概率 密度 函数 f(zi,zz)， 有 
时 需要 得 到 Xi 和 Xs2 的 函数 的 随机 变量 YY 和 7 的 联合 分 布 . 特别 地 , 假定 对 于 
某 些 函数 g! 和 go, Yi = gi(Xi1,X2) 和 Y= go(X1, X2). 
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假定 函数 g! 和 g2 满足 下 列 条 件 : 

1. 由 方程 Ww = gi(z1,7T2) 和 yo = gz(zl,zz) 可 以 唯一 地 解 出 z1 和 z2, 利用 yi 
和 wo 给 出 z= (yi,y2) 和 za = ha(y1,y2); 

2. 函数 g! 和 g2 在 所 有 的 点 (z1,72) 上 有 连续 的 偏 导 数 , 而 且 使 得 下 面 的 2 x 2 
行列 式 在 所 有 的 点 (zl,zz) 上 有 


全 


Bn On 
=| Or Bz |_ Om Og bg Og 
| ,oy, sag | Dor Be PiaOni 
Br! Or2 
在 这 两 个 条 件 下 , 可 以 证 明 随机 变量 Yi 和 Y 联合 地 连续 , 联合 密度 函数 为 
fys,ya (YY2) = fxs,xa(T1, 2))I(z1, 72)|7 (2.19) 


其 中 ma = 站 (加 ya) 和 zz = h2(y1,y2). 
方程 (2.19) 的 证 明 可 以 遵循 如 下 的 路 线 进行 : 


P<sm ysw= | ft)ande (2.20) 


91(z1,52) Sy 
92(51.52) SY 


联合 密度 函数 现在 可 以 由 方程 (2.20) 对 yy 和 yz 求 微分 得 到 . 微分 的 结果 等 于 方程 
(2.19) 的 右边 的 式 子 , 这 是 高 等 微 积分 的 一 个 练习 , 在 本 书 中 将 不 给 出 其 证 明 . 
例 2.39 若 XX 和 YY 是 独立 的 伽 马 随机 变 基 , 分 别 具 有 参数 (a, 和 ) 和 (8, 入 ). 计算 
U=X+Y 和 V=X/(X+Y) 的 联合 密度 . 
解 X 和 YY 的 联合 密度 为 

Ne- (Mz) ! Me Ny)! 


fx,r (ZY)= — Fa FUD) 
二 A er-AMz+W)za-1gy8-1 
T(aT(O) 
现在 , 如 果 g1(z,y) =z+2y 和 gz(z,y) = z/(z+3), 那么 
dn -sg _1 Og 3 Og _ 7 
ar Oy * Or (z+ Oy (r+y) 


所 以 

1 1 
9 
(z+ (z+y)? 
最 后 , 因为 方程 4 = z+y 和 w= Zz/(z 十 y) 有 和 解 z=uv,y =u(1 一 v), 所 以 

fuv (uv)= fx,rluv, ul(l — vu 
_ Me (Mu)®+871l vo!1(1 — v)s-T(a+B) 
T(a+B) Ta)r(O9) 


es 
r+y 


J(z,y) = 
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因此 , XX+Y 和 X/(X 十 了 ) 是 独立 的 , 而 且 关 十 Y 有 参数 为 (a 十 6, 入 ) 的 伽 马 分 布 ， 
而 X/(X 十 Y) 有 密度 函数 
T(a+p) a-1 


fl) = Fara)” 
这 称 为 以 (a, 8) 为 参数 的 贝塔 密度 
这 个 结果 很 有 趣 . 假定 有 n+m 个 工作 需要 完成 ,每 个 (独立 地 ) 需要 以 和 为 强度 
的 指数 时 间 完 成 . 又 假定 我 们 有 两 个 工人 来 完成 这 些 工作 . 工人 1 做 工作 12,…,n， 
工人 做 其 余 的 m 个 工作 . 如 果 我 们 让 X 和 Y 分 别 记 工人 工 和 工人 工 的 全 部 工 
作 时间 , 那么 用 前 面 的 结果 推出 X 和 Y 分 别 是 参数 为 (n, 和 ) 和 (m, 和) 的 独立 的 伽 
马 随机 变量 . 于 是 , 上 面 的 结果 推出 , 独立 于 所 有 +m 个 工作 所 需 的 工作 时 间 ( 即 
区 十 也) 由 工人 1 完成 的 工作 的 时 间 的 比例 具有 参数 为 (n,m) 的 贝塔 分 布 。 。 四 
当 n 个 随机 变革 Xi Xz,…，X 的 联合 密度 函数 已 知 时 , 我 们 想 计 算 六 六,…， 
六 的 联合 密度 函数 , 其 中 


Y=g(Xy, Xn), Ya =g92(X1, 9Xn)， Yn = gn(X1,, Xn) 


方法 是 一 样 的 . 即 假定 函数 g; 有 连续 的 偏 导数 , 而 且 在 所 有 的 点 (z1,…,zn) 上 , 雅 
可 比 行列 式 J(z1,…,zn) 关 0, 其 中 


(1—v)-!, 0<v<l1 


On Og Og 

Or1 Orz2 ” Orn 

-| 和 Og Og2 
J(zl，……zn) = Be DE Yo Dar 
Brl er ” Orn 


此 外 , 假定 方程 组 yy = gj(zl ,zn), ga = 92(z1 Zn an = gn(Z yn) 
有 唯一 的 解 , 比如 说 , zi = hh(,… ,yn),… ,Tn = hn(y1,…,yn). 在 这 些 假定 下 , 随 
机 变量 Yi 的 联合 密度 函数 为 

(0 xs) 柯 (7 


其 中 zi = hi(yi,…… yn),i = 1,2,.…,n. 
1 


1 


2.6 和 矩 母 函数 
随机 变量 X 的 短 母 函数 lt) 对 所 有 值 t 定义 为 
Djerp(z)， ”车 X 离 散 
9 = Ele*] = 


z 


站 wAGoaz， 若 工 连续 
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我 们 称 $(t) 为 矩 母 函数 , 因为 X 的 所 有 的 矩 能 由 $(t) 相继 地 求 微分 得 到 . 例如 ， 
$0) = Ele =5 (| = Ble 


因此 
(0) = ED 
类 似 地 
"(0) = So) = LEXe*] =E [9] = ELX2e5d] 
所 以 


"(0) = E[X 
一 般 地 , $(t) 的 n 阶 导 数 在 t= 0 时 等 于 E[X"], 就 是 说 ， 
$0)=EIX"], n>1 
我 们 现在 计算 一 些 常见 分 布 的 9(t). 
例 2.40( 参 数 为 n 和 p 的 二 项 分 布 ) 


= Eletx] = Te 人 得 )xa —p)"* 


大 =0 
= 2 ) (pe')*(1 —p)"*= (pe! +1—p)" 
k=0 


因此 
H(t) =n(pe' +1—p)" pe’ 
所 以 
E[X]= (0)=np 


这 就 验证 了 例 2.17 所 得 的 结果 . 求 二 阶 导 数 , 得 到 
H(t) =n(n— 1)(pe! +1—p)" ?(pe!)? +n(pe! +1—p)"- pe 


所 以 
E[X]=0"(0)=n(n— 1)p?+np 


因此 , X 的 方差 为 
Var(X) = E[X*] — (EI[X]))? =n(n — Dp? +np— np? = np(1—7p) 国 
例 2.41( 均 值 为 和 的 泊 松 分 布 ) 
lt) = Eletx] = SS a 二 Ce EE er-xexe = exp{ 和 (et — 1)} 


n=0 n=0 


微分 得 到 
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db = Metexp{Ae! —1)}, 
H(t) = (Ne!)?exp{Ae: — 1)} + Xetexp{X(e: — 1)} 


所 以 
E[X]= (0) = 
E[X3] = "(0) = 了 + 和 
Var(X)= EL 一 ED) 一 
因此 , 泊 松 分 布 的 均值 和 方差 都 是 入. 
例 2.42( 参 数 为 和 的 指数 分 布 ) 
db = Ele*] = 上 er Me dz = | e-0-0sdz = 人， 对 于 t<》 
o 入 = 


从 上 面 的 推导 我 们 注意 到 , 对 于 指数 分 布 , %(b) 只 对 小 于 和 的 上 值 定义 . 对 b(t) 微 
分 得 到 


i 
4 的 = Gi HO= Gm 
因此 : 
EIX] = (0) =，EIX4]=(0) = 总 
于 是 X 的 方差 为 


Var(X) = ELX2] - (E[X])? = 立 中 
例 2.43( 参 数 为 上 和 o? 的 正 态 分 布 ) ”标准 正 态 随机 变 基 2 的 矩 母 函数 如 下 求 
得 : 
V2n - 2r J- 
ep2_ lee/2qz = ef/2 
元 
如 果 2 是 标准 正 态 分 布 , 那么 X02 十 就 是 参数 为 /和 o? 的 正 态 分布 , 于 是 
9(t) = Ele'*] = Ele!(*2+4)] = etE[eto2] = exp {于 - 寺 

经 过 微分 , 我 们 得 到 


212 
P(t)= (4+ wop{ 3 + 对 ， 


t21 1 Pe tz 一 z2/2 1 一 1 一 (z? 一 2tz)/2d， 
E[elZ] = 一 一 ee dz 一 yp e lz 
oo oo 


1 
W(t)= (1+to?)?exp 人 侍 和 村 十 oem{ 于 十 对 
所 以 
它 蕴涵 了 


EI[X]=9(0) = 所， EIX]= 0"(0)=p2+0? 


Var(X) = E[X*] — E([X])* = o? 
表 2.1 与 表 2.2 给 出 了 一 些 常见 分 布 的 矩 母 函 数 . 
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表 2.1 
高 散 概率 分 布 概率 质量 函数 p(z) | 。 矩 纯 数 tb) [均值 | ”方差 
二 项 分 布 ,参数 为 ran, | (petQ-p)" | np | np(1-p) 
npOSpS1 z=0,1,.…,n 
a 
泊 松 分 布 , 参数 为 和 ,入 > 0 | a | exp{ 和 (et — 1)} | 六 入 
z=0,1,2,.… 


几何 分 布 , 参数 为 p,0 < p < 1 


和 矩 母 函数 的 一 个 重要 性 质 是 , 独立 随机 变量 和 的 答 母 函数 正 是 单个 矩 母 函数 的 
乘积 . 为 了 理解 这 一 点 , 假设 X 和 Y 是 独立 的 , 它们 分 别 有 和 矩 母 函数 yx (t) 和 dr (t). 
那么 X+Y 的 矩 母 函数 Bx+y(t) 是 

px+r(t) 二 Ele:(X+Y)] i E[etxetY] i E[etx]E[ety] gx(t)gy 介 
其 中 倒数 第 二 个 等 式 得 自命 题 2.3, 因为 X 和 了 是 独立 的 . 


表 2.2 
连续 概率 分 布 概率 密度 函数 f(z) 和 矩 母 函数 %(t) | 均值 | 方差 
1 
_ | oo, a<z<b bt — ent at+bl(b—a)? 
(a,b) 上 的 均 多 分 布 “| f(z) = {i pe Co lal ws 
_ 1 xe-xe，z2>0 入 1 1 
指数 分 布 ,参数 为 入 和 >0 | f(z) = { . z<0 Xe 入 | 豆 
Xe-》z(Az)n-1 > 而 
一 -一 一 一 入 n n 
匣 马 分 布 , 参数 (m, 和 ), 和 >0f(z)=4 -DT ， ”> a 入 | 去 
| 0， z<0 G 四 外 
a 2 
正 态 分 布 , 参数 (J,0?) | f(z) = 让 "(3 } ， en {n+ } 丽 | 党 
oe on 


另 一 个 重要 的 性 质 是 , 乱 母 函数 唯一 地 确定 了 分 布 .这 就 是 说 , 在 随机 变量 的 
和 矩 母 函数 和 分 布 函 数 之 间 存 在 一 一 对 应 
例 2.44( 独 立 二 项 随机 变量 的 和 ) “如果 X 和 了 分别 是 以 (n,p) 和 (m,p) 为 参数 
的 独立 二 项 随机 变量 , 那么 六 十 Y 的 分 布 是 什么 ? 
解 ” X+Y 的 矩 母 函数 为 

Bx+r(t) = Bx(t)py(t) = (pe +1—p)"(pe: +1—p)™ = (pe +1—p)™+" 
而 (pe! 十 (1 一 p))"+t™ 正 是 以 (n 十 m,p) 为 参数 的 二 项 随机 变量 的 矩 母 函 数 . 从 而 它 
一 定 是 XX 十 Y 的 分 布 . 国 
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例 2.45( 独 立 泊 松 随机 变量 的 和 ) ” 当 X 和 了 分 别 是 以 入 和 X2 为 参数 的 独立 的 
泊 松 随机 变量 时 , 求 X 十 Y 的 分 布 . 
解 


xy 四 =gx(bgy 全 一 ee Dente 一 et 

因此 , X +Y 是 以 均值 Xi + 和 2 泊 松 地 分 布 的 , 这 就 验证 了 例 2.37 的 结果 . 国 
例 2.46( 独 立正 态 随机 变量 的 和 ) 证明: 如果 X 和 了 是 分 别 具 有 参数 (ju,0?) 
和 (J2,03) 的 独立 正 态 随机 变量 , 那么 X +Y 是 正 态 的 , 具有 均值 jw + /ua 与 方差 
of +o2. 
解 

px+r(t)= Bx(t)or(t) = eo{ 空 扩 mt] oo{ 殖 引 pat) 
= op{ 十 (Ha + 
它 是 均值 为 jn + ja 且 方 差 为 of + o3 的 正 态 随机 变 基 的 矩 母 函数 . 全 
唯一 地 确定 分 布 , 因此 得 到 结果 . 
例 2.47( 泊 松 范例 ) ”在 2.2.4 节 中 ， es 了 
的 n 次 独立 试验 中 成 功 的 次 数 , 当 n 大 且 p 小 时 , 近似 于 参数 为 A= np 的 泊 松 随机 
变 基 . 这 个 结果 可 以 实质 性 地 加 强 . 首先 , 每 次 试验 不 必 都 有 相同 的 成 功 概率 , 只 要 
所 有 的 成 功 概率 都 很 小 就 行 . 为 了 说 明确 实 是 这 样 , 假设 所 有 的 试验 是 独立 的 , 第 i 
次 试验 结果 是 成 功 的 概率 pi(i = 1,…,n) 都 小 . 如 果 第 i 次 试验 是 成 功 , 令 X; 等 
于 1, 如 果 是 其 他 情形 , 令 X; 等 于 0, 由 它 推出 成 功 的 总 次 数 , 记 为 X, 可 以 表示 为 


并 二 守 xX 
i=1 
利用 Xi 是 伯 努 利 (或 二 项 ) 随机 变量 , 其 矩 母 函数 是 


EleX'] =pie! +1—pi=1+pi(e! —1) 
现在 , 对 于 小 的 |z| , 利用 结果 


excl1+z 
因为 当 pi 小 时 , Pie' 一 1) 也 小 , 随 之 推出 
Ele'*’] =1+pi(e! — 1) ~ exp{pi(e! — 1)} 
因为 独立 随机 变量 和 的 矩 母 函 数 正 是 它们 的 矩 母 函 数 的 乘积 , 由 上 面 的 结果 得 到 
Ele'x] ~ [I exp{pi(e: - 1)} = exp {Exe 一 "| 
i=1 i 


但 是 上 式 的 右 方 是 均值 为 学 ;pi 的 泊 松 随机 变量 的 矩 母 函 数 , 于 是 论证 了 它 近似 地 
是 X 的 分 布 . 
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对 于 成 功 的 次 数 近似 地 为 一 个 泊 松 分 布 的 试验 , 不 仅 每 次 试验 不 必 有 相同 的 成 
功 概率 , 甚至 不 需要 是 独立 的 , 只 要 它们 的 依赖 性 是 弱 的 . 例如 , 回想 起 匹配 问题 ( 例 
2.31), n 个 人 从 由 他 们 每 人 的 一 个 帽子 组 成 的 集合 中 随机 地 选取 一 个 帽子 . 将 随机 
选取 看 成 次 试验 , 我 们 说 试验 i 成 功 , 如 果 第 i 个 人 选 得 他 自己 的 帽子 , 令 4; 为 
试验 i 成功 这 个 事件 , 由 此 推出 

P(AD) = 和 P(AilA) = jixi 
因此 , 虽然 这 些 试 验 并 不 是 独立 的 , 但 是 当 n 大 时 , 它们 显示 弱 的 依赖 性 . 因为 这 纶 
的 依赖 性 和 小 的 成 功 概率 , 所 以 当 n 大 时 , 这 个 匹配 数 应 该 近似 于 一 个 均值 为 1 的 
泊 松 分 布 , 这 在 例 2.31 中 得 到 证 明 . 

“ 当 每 次 试验 成 功 概率 都 小 的 时 候 , 在 n 次 或 者 独立 的 或 者 至 多 是 弱 相 依 的 试 
验 中 , 其 成 功 次 数 近 似 地 是 一 个 泊 松 随机 变量 "， 这 个 陈述 称 为 泊 松 范例 (Poisson 
paradigm). 
注 ”对 于 一 个 非 负 随 机 交 量 XX, 常 方 便 地 定义 它 的 拉 普 拉 斯 变换 (Laplace trans- 
form) g(t)(t > 0) 为 

g(t) = $(-t) = Ele-!*] 
也 就 是 说 , 拉 普 拉 斯 变换 在 t 处 的 赋值 正 是 矩 母 函数 在 -t 处 的 赋值 ， 当 随机 变量 
非 负 时 , 与 矩 母 函 数 相 比 , 处 理 拉 普 拉 斯 变换 的 优点 是 , 如 果 羡 >>0 且 tt 之 0, 那么 


0<gse*<g1 


即 拉 普 拉 斯 变换 永远 在 0 与 1 之 间 . 正如 矩 母 函 数 情形 一 样 ， 人 
换 的 非 负 随 机 变量 有 同样 的 分 布 仍然 是 正确 的 . 

我 们 也 可 以 定义 两 个 或 更 多 的 随机 变 基 的 联合 矩 母 函数 . 具体 如 下 . 本 
n 个 随机 变 其 X1,…, Xn, 联合 矩 母 函 数 p(t,…, 二) 对 所 有 的 实 值 tL,…,th 定义 
为 


dt) = Ble Xttn Xn))] 
可 以 证 明 9(t1,…,tn) 唯一 地 确定 X1,… ,Xn 的 联合 分 布 . 
例 2.48( 多 元 正 态 分 布 ) 令 2Z1,…,Zn 是 nn 个 独立 的 标准 正 态 随机 变量 如 果 对 
于 某 些 常数 aij(1 <i<sm,1<j<n) 和 ju(l <i< m), 

XI 一 all121 十 … 十 aln2n + hi, 

X2=a2121 十 … 十 aq2n2n 十 ji2， 


和 一 ai121 十 … 十 ain2n + ph 


Xm 一 aml121 + + amnZn + jm 
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那么 称 随机 变量 X1,…, Xm 具有 多 元 正 态 分 布 . 
由 于 独立 正 态 随机 变 基 的 和 本 身 就 是 一 个 正 态 随机 变量 , 所 以 每 个 X; 是 正 态 
随机 变 基 , 具有 如 下 均值 和 方差 


ED = Am， Var(Xi)= Da 
j=1 


现在 我 们 确定 X1,…, Xm 的 联合 矩 母 函数 

$lt1,* ,tm) = Elexp{t1X1 + +tmXm)}] 
首先 注意 , 由 于 沁 呈 1 tiXi 本 身 是 独立 正 态 随机 变量 Z1,…, Zn 的 线性 组 合 , 它 也 
是 正 态 地 分 布 的 . 它 的 均值 与 方差 分 别 是 


mm m 
s [Sox] -Du 
i=1 i=1l 


var( 4X4) = co 人 人 tx 5%) = HabCov(Xi, x) 
i=l i=1 j=1 i=1 j=1 
现在 , 如 果 Y 是 均值 4 和 方差 o? 的 正 态 随机 变 基 , 那么 
Ele’] = ¢y(Dlet = r+"!? 
从 而 , 我 们 看 到 
bt, , tm) = exp 位 w 十 2 itjCov(Xi, Xi) } 


i=1 


这 就 证 明了 X1,…, Xm 的 联合 分 布 由 值 ELXi] 与 Cov(Xi, Xi)(i,j = 1,…,m) 完全 
确定 . 国 


正 态 总 体 的 样本 均值 与 样本 方差 的 联合 分 布 


假定 X1,…, Xn 是 独立 同 分 布 随机 变 基 , 每 个 具有 均值 4 和 方差 ">, 随机 变 
基 3? 定义 为 1 


~ (Xi — X)? 
3° 辫 n-l 
称 为 这 些 数据 的 样本 方差 (sample variance). 为 了 计算 E[5?], 我 们 用 恒等式 
Ee- -R= Xp -nF (2.21) 
这 1 


这 可 以 如 下 证 明 ， 
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= Yo = +n(p—R)* + X) DX 


i=1l i=1 


= DKW +n(p— :+2(p— XnX — ny) 
= DXi— 1 +n(p—X)? — 2n(p— HX)? 


随 之 得 到 恒等式 (2.21). 
利用 恒等式 (2.21) 得 到 
El(n—1)5%] = > EGG 一 由 -mnEIX- 3 
i=1 
=no? —nVar(X) 
= 人 一 Doc 由 命题 2.4(b) 
从 而 , 由 上 式 得 到 
了 E[53] = 07. 
我 们 现在 来 确定 , 当 Xi 有 正 态 分 布 时 , 样本 均值 双 = "1 Xi/n 与 样本 方差 
5? 的 联合 分 布 . 首先 , 我 们 需要 卡 方 随机 变量 的 概念 . 
定义 2.2 ”如 果 1,… ,2 是 独立 的 标准 正 态 随机 变 基 , 那么 随机 变 基 2 已 ; 如 称 
为 具有 自由 度 n 的 卡 方 随机 变量 . 
我 们 现在 计算 i_1 2? 的 矩 母 函数 . 首先 注意 到 
Elexp{t2?}] = 高 厂 els eT /2dz 


Var |- 


4 —z?/207 和 -1 
= 一 天 dz =(1—2t 
左 |* 其 中 o2=(1 一 24) 
= 0o=(1—2t)-/? 


因此 | 
E [= 位 引 : Iseetz9- 一 20)-?/2 
记 1 


现在 , 令 X1,…, Xn 为 独立 正 态 随机 变量 , 每 个 具有 均值 4 和 方差 o?, 并 且 用 叉 == 
二 :1 Xi/n 和 5? 表示 它们 的 样本 均值 和 样本 方差 . 因为 独立 正 态 随机 变量 的 和 也 
是 正 态 随 机 变量 , 这 就 推出 是 具有 期 望 值 / 和 方差 o?/n 的 正 态 随机 变 基 . 此 外 ， 


由 命题 2.4 
Cov(X,Xi—X)=0, i=1,,n (2.22) 
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又 因为 这 ,Xi 一 又, X2 一 处 ,… ,Xn 一 又 都 是 独立 的 标准 正 态 随机 变量 (Xi -4)/o 
(i = 1,…,n) 的 线性 组 合 , 由 此 推出 随机 变量 到 , Xi 一双, X2 一 到 ……,Xn 一 和 的 联合 
分 布 是 多 元 正 态 的 . 然而 , 如 果 我 们 令 Y 是 均值 为 /和 方差 为 o?/n 且 与 X1,…,X 
独立 的 正 态 随机 变 甚 , 那么 随机 变 其 了 ,Xi 一 入 , X? 一 下 ,… ,Xn 一 匀 也 有 多 元 正 态 
分 布 , 由 方程 (2.22), 它们 和 随机 变 基 入 ,X; 一 义 (i = 1,…,n) 有 相同 的 期 望 值 和 协 
方差 . 从 而 , 由 于 多 元 正 态 分 布 由 其 期 望 值 和 协 方差 所 完全 确定 , 所 以 可 以 得 到 结 
论 , 随机 变量 Y, Xi 一 和,X2 一 又 ,，,Xn 一 外 与 入 ,Xi 一 叉 ,X2 一 义 ,…,Xn 一 久 有 
相同 的 联合 分 布 . 因此 , 这 就 证 明了 独立 于 偏差 序列 Xi 一 又,i = 1,…,n. 

因为 站 与 偏差 序列 Xi 一 天 (i = 1,…,n) 是 独立 的 , 由 此 推出 它 独立 于 样本 


方差 
(Xi—X)? 
%—1 
为 了 确定 5? 的 分 布 , 用 恒等式 (2.21) 下 到 


(n-1)5*= > —/)* —n(X— 1)? 


i=1 


两 边 除 以 o? 得 


i 2 2 Ly an 
L 3 + (5#) = 人 (2.23) 
现在 , 沁 i_(Xi 一 1)?/o? 是 nn 个 独立 的 标准 正 态 随 机 变 基 的 平方 和 , 所 以 是 具有 
个 自由 度 的 卡 方 随机 变量 , 于 是 它 有 和 矩 母 函 数 (1 一 2t)-"™?. 又 [(X 一 p)/(o/VnD)]? 
是 标准 正 态 随机 变量 的 平方 , 因此 它 是 1 个 自由 度 的 卡 方 随机 变量 , 于 是 它 有 和 矩 母 
函数 (1 - 20)-!2. 此 外 , 我 们 在 前 面 已 经 看 到 , 方程 (2.23) 左边 的 两 个 随机 变 基 是 
独立 的 . 所 以 , 由 独立 随机 变量 和 的 矩 母 函数 等 于 单个 矩 母 函数 的 乘积 , 我 们 得 到 


Eletm-05?/](1 了 26)-1/2 =(1- 26)-n/2 


也 就 是 Eletn-0s/o] = (1 一 2t)-("—D/2 


但 是 , 因为 (1 - 20-o- 0542 是 一 个 具有 n 一 1 个 自由 度 的 卡 方 随机 变 基 的 矩 母 函 
数 , 所 以 可 以 得 到 如 下 结论 : 由 于 矩 母 函 数 唯一 地 确定 随机 变 基 的 分 布 , 所 以 它 是 
(n 一 1)5?/o? 的 分 布 . 

综合 起 来 , 我 们 已 经 证 明了 下 述 命题 . 
命题 2.5 如果 X1,…,Xn 是 独立 同 分 布 的 正 态 随机 变量 , 具有 均值 几 和 方差 02， 
那么 样本 均值 义 与 样本 方差 5? 是 独立 的 . 下 是 正 态 随机 变量 , 具有 均值 J: 和 方差 
a2/m, (mn 一 1)S?/o? 是 具有 n 一 1 个 自由 度 的 卡 方 随机 变量 . 
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2.7 ”发 生 事件 数 的 分 布 


考虑 任意 事件 41,…, An, 并 且 以 X 记 这 些 事件 中 发 生 的 个 数 . 我 们 要 确定 XX 


的 概率 质量 函数 . 首先 ,对 于 1<k<n, 令 
Sk= 5 PUa Ai,) 


<<ik 


! 


等 于 所 有 ( ” ) 组 上 个 不 同事 件 的 交 的 概率 的 和 , 同时 注意 , 由 容 斥 恒等式 可 得 


PC >0=P (UA) = 
i=1 


现在 , 我 们 固定 这 个 事件 中 的 上 个 (例如 Ai,，,…, Ai), 而 且 令 这 上 个 事件 都 发 生 


的 事件 为 >; 
4= 站 45 
j=1 
再 令 其 他 的 n 一 上 个 事件 都 不 发 生 的 事件 为 
B= NN 4 
了 fit 
因此 , 4B 是 恰好 只 有 4i,,…, Ai 发 生 的 事件 . 因为 
4=4BU4B? 
所 以 有 


P(4) = P(4B)+P(4B9) 


或 者 , 等 价 地 有 
P(AB) = PL4) — P(4B9) 


因为 只 有 当 事 件 Aj(j # { 记 1,…, 认 }) 中 至 少 有 一 个 发 生 时 B* 才 发 生 , 所 以 
B= U 4% 


了 人 


P(4Be) =P (4 U 4 =P ( U 人] 
了 fa fi ak 
应 用 容 斥 恒等式 , 我 们 给 出 


于 是 


P(AB®)= > P(44i) 一 PC44545) 
了 fi Ni<jag{ile% sin} 
演 > P(AA;, Aj, Aj;s) 一 … 


1<ja<ja¢{il ni} 
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利用 4 = [N_i 45 可 知 , 上 式 表明 恰好 有 上 个 事件 4i,,…, Ai 发 生 的 概率 是 


P(A)—P(AB®)=P(As.As)— D, P(Aa:…hi.4;) 
j¢{i sie} 
出 > P(Ai,… Ai. Aj, Aj,) 
1<jag¢{ilynin} 
学 和 P(A Ai. 4j Aj Ajs) + 
i<ja<jag{iin} 


在 所 有 上 个 不 同 的 指标 的 集合 上 对 上 式 求 和 可 得 
PX= 月 = 》 PhiaiiiAhn)- DD 5 PAsAih) 


<ik 和 < < 认 职位 和 vi 
+ 5 2 PC AiAn hs) 29 
ei i<jag{ienin} 
首先 , 注意 到 
5 PU hi) = 
让 < 让 
现在 , 考虑 


5 PAA hy)) 


eeik g(r} 


在 此 多 重 求 和 中 , 每 组 不 同 的 上 十 1 个 事件 Am,，,…, Am。,， 的 交 的 概率 会 出 现 
(“二 1 ) 次 . 这 是 因为 在 得 到 结果 的 相 加 项 P(Am，… Ahm,,) 中 , 每 组 个 指标 的 


选取 起 了 记 ,…,ik 的 作用 , 而 其 余 指标 的 选取 起 了 7 的 作用 . 因此 


大 十 1 
P(Aa Aihj)= ( ) 3 P(Am, Amn) 
大 ma < m+ 


大 十 1 
-( ) su 


站 < < 让 课 人 ai 


» 
类 似 地 , 因为 在 部; .< jpgta ca) P(A … Ai A Aj) 中 每 组 大 十 2 个 不 


同 的 事件 Aw,,…， Am。4s 的 交 的 概率 将 出 现 (“上 2 ) 次 , 由 此 推出 


大 十 2 
Ph hit) = ( 大 )s 


eic <jog{i sin} 


对 (2.24) 式 中 的 其 他 多 重 求 和 重复 此 推理 给 出 


A 
Ptx- 有 rs- 人 ( )se+( 人 js Co 人 )s, 
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PC 月 = 和 CD 


j=k 


上 式 可 以 写成 , 
(2)s 


现在 我 们 用 它 证 明 
P(X > 月 = CD) ( 六 志 )s 1 
j=k k—1 


这 个 证 明 利用 由 =n 开始 的 向 后 数学 归纳 法 . 现在 , 当 k = n 时 , 前 面 的 恒等式 
说 明 


P(X=n)= 
是 正确 的 . 所 以 假定 
P(X>k+1)= 和 (—1)*+1+i ( 了 )s 
j=k+1 k 
于 是 


P(X >k)= P(X= k)+P(X>k+1) 


= od )s+ bp We 7)s 


j=k j=k+1 


-ls 


二 Sk 十 2 Cow (二 1)s 


j=k+1 


n i 
=V (Dti[ 7 5S, 
om 1) 


jE 


这 样 就 完成 了 证 明 . 
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本 节 我 们 从 证 明 一 个 称 为 马尔 可 夫 不 等 式 的 结果 入 手 . 
命题 2.6( 马 尔 可 夫 不 等 式 ) ”如 果 关 是 只 取 非 负 值 的 随机 变量 , 那么 对 于 任意 a > 0 
P{X>a}< | 


证 明 ”我 们 在 X 是 具有 密度 f 的 连续 情形 给 出 证 明 . 
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E[X] = 长 zjf(z)dz = 上 zf(z)dr+ 上 zf(z)dr 
> 下 zjf(z)dz > 上 ajf(z)dz 


= a far =aP{X >a} 


这 就 证 明了 结果 . 站 
作为 推论 , 我 们 得 到 如 下 的 命题 

命题 2.7( 切 比 雪夫 不 等 式 ) 如果 X 是 具有 均值 和 方差 o2 的 随机 变量 , 那么 对 
于 任意 大 > 0 和 
P{IX- 川 > 及 < 不 
证 明 ”因为 (X 一 人 )? 是 非 负 随机 变 基 , 所 以 可 以 应 用 马尔 可 夫 不 等 式 ( 取 a = ?) 
得 到 

P{X -1:2 < DXA 


但 是 因为 (X 一 p)? > k? 当 且 仅 当 |X 一 yp| > k, 上 式 等 价 于 
EX 一 0 _o 
让 Rk 


P{IX- 川 > 里 < 


证 明 完 毕 . 图 
马尔 可 夫 不 等 式 和 切 比 雪夫 不 等 式 的 重要 性 在 于 , 在 只 有 概率 分 布 的 均值 或 者 
均值 和 方差 已 知 时 , 它们 使 我 们 能 推 得 所 求 概率 的 上 界 . 当然 , 如 果真 实 分 布 已 知 ， 
那么 所 求 的 概率 可 以 精确 地 计算 , 我 们 就 不 需要 求助 于 上 界 . 
例 2.49 ”假设 我 们 知道 在 一 个 工厂 每 星期 生产 的 产品 数 是 均值 为 500 的 随机 变 基 . 
(a) 如 何 推定 这 个 星期 的 产品 至 少 有 1000 的 概率 ? 
(b) 如 果 这 星期 生产 的 产品 的 方差 已 知 等 于 100, 那么 如 何 推定 这 个 星期 的 产 
品 在 400 与 600 之 间 的 概率 ? 
解 令 和 是 一 星期 生产 的 产品 数 . 
(a) 用 马尔 可 夫 不 等 式 
EIX] 500 1 


P{X > 1000} < 1000 = 1000 =3 
(b) 用 切 比 雪 夫 不 等 式 


P{IX 500|2100} < -0 = 1 
pr ~ 1002? 100 


因此 请 


一 2 1 一 = 
P{IX —500| < 100} > 1— 105 = 105 


2.8 极限 定理 61 


所 以 , 这 个 星期 的 产品 在 400 与 600 之 间 的 概率 至 少 是 0.99. 
下 面 的 定理 , 称 为 强大 数 定律 (strong law of large numbers) , 是 概率 论 中 最 著 
名 的 结果 . 它 可 表述 为 , 一 列 独立 同 分 布 的 随机 变量 的 平均 值 以 概率 1 收敛 到 这 个 
分 布 的 均值 . 
定理 2.1( 强 大 数 定律 ) ”假定 XX1, XX2,……… 是 一 列 独立 同 分 布 的 随机 变量 ， 令 E[X;]= 
几 那么 , 当 n 一 00 时 以 概率 1 有 
Xi1+X2+ + Xn 
一 人 
举 一 个 上 面 的 例子 , 假设 做 了 一 系列 独立 的 试验 , 令 已 是 一 个 固定 的 事件 , 而 
以 P(E) 记 在 每 次 特定 的 试验 中 已 出 现 的 概率 . 令 
x-{ 1， 若 在 第 i 次 试验 妃 发 生 
0， 若 在 第 i 次 试验 巨 未 发 生 
由 强大 数 定律 , 以 概率 1 有 
A 了 十 ,BlX] = P(E) (2.25) 
因为 Xi 十 … 十 Xn 代表 事件 巨 在 这 n 次 试验 中 发 生 的 次 数 , 我 们 可 以 将 方程 (2.25) 
表述 为 , 事件 已 发 生 次 数 的 极限 比例 以 概率 1 是 P(E). 
与 强大 数 定律 并 驾 齐 驱 地 占有 概率 论 中 首要 荣誉 的 结果 是 中 心 极限 定理 ， 除 
了 它 理论 上 的 价值 和 重要 性 以 外 , 它 还 对 于 计算 独立 随机 变量 的 和 的 近似 概率 提供 
了 一 个 比较 简单 的 方法 . 它 也 解释 了 为 仁 么 有 那么 多 自然 “总 体 ” 的 经 验 频 率 显 示 
为 钟 形 ( 即 正 态 ) 曲线 这 个 显著 的 事实 . 
定理 2.2( 中 心 极限 定理 ) ”假定 Xi, X2,… 是 一 列 独 立 同 分 布 的 随机 变量 , 每 个 具 
有 均值 J 和 方差 0?. 那么 当 nn 一 oo 时 ， 
X1+X2+:…+ Xn—nyp 
ovn 
的 分 布 趋 于 标准 正 态 分 布 . 也 就 是 说 , 当 nn 一 co 时 ， 
向 十 了 十 十 3 一作 
={ t<o)- 谍 | /2dz 
注意 , 如 本 节 中 的 其 他 结果 一 样 , 此 定理 对 X; 的 任意 分布 都 成 立 , 这 正 是 其 强 
大 有 力 之 处 . 
如 果 X 是 参数 为 n 和 p 的 二 项 随机 变量 , 那么 X 与 个 独立 的 且 具 有 参数 p 
的 伯 努 利 随 机 变量 的 和 同 分 布 . (回忆 一 下 , 伯 努 利 随机 变量 正 是 参数 "= 1 的 二 项 
随机 变量 .) 因此 , 当 一 co 时 
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的 分 布 趋 近 标准 正 态 分 布 . 一 般 地 , 在 n 满足 np(1 一 p) > 10 时 , 这 个 正 态 近似 就 十 
分 好 了 . 
例 2.50( 二 项 分 布 的 正 态 近似 ) ” 令 X 为 抛掷 一 枚 均匀 的 硬币 40 次 中 出 现 正面 的 
次 数 . 求 X = 20 的 概率 . 用 正 态 近似 , 并 将 结果 与 精确 解 比较 . 
解 ” 因 为 二 项 随机 变量 是 离散 的 , 而 正 态 随 机 变量 是 连续 的 , 所 以 所 求 概率 的 一 个 
较 好 的 近似 为 
P{X = 20} =P{19.5 < X < 20.5} 

人 XX-20 205 一 20 

V10 V10 VI10 } 


七 一 20 
=P4-0.16< <0.16 
{ V10 } 


~ (0.16) — $(—0.16) 
其 中 B(z) 是 标准 正 态 随机 变 基 小 于 z 的 概率 , 由 


Ty 
(7) = 一 一 ey/2dy 
2 J-oo 


Var |- 


给 出 , 由 标准 正 态 分 布 的 对 称 性 
$(—0.16) = P{N(0,1) > 0.16} = 1 一 (0.16) 
其 中 N(0,1) 是 标准 正 态 随机 变量 . 因此 , 所 求 的 概率 近似 地 为 
P{X = 20} ~ 28(0.16) —1 


用 表 2.3, 我 们 得 到 
P{X = 20} ~ 0.1272 
精确 结果 是 
40 1 
A Go) 全 
可 以 证 明 它 等 于 0.1254. LJ 


秘 2.3 ”标准 正 态 曲线 下 方位 于 z 的 左边 的 面积 亚 (z) 


Ea | 0.00 0.01 0.02 0.03 0.04 0.05 0.06 0.07 0.08 0.09 

0.0 | 0.5000 0.5040 0.5080 0.5120 0.5160 0.5199 0.5239 0.5279 0.5319 0.5359 
0.1 | 0.5398 0.5438 0.5478 0.5517 0.5557 0.5597 0.5636 0.5675 0.5714 0.5753 
0.2 | 0.5793 0.5832 0.5871 0.5910 0.5948 0.5987 0.6026 0.6064 0.6103 0.6141 
0.3 | 0.6179 0.6217 0.6255 0.6293 0.6331 0.6368 0.6406 0.6443 0.6480 0.6517 
0.4 | 0.6554 0.6591 0.6628 0.6664 0.6700 0.6736 0.6772 0.6808 0.6844 0.6879 
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( 续 ) 


名 0.00 0.01 0.02 0.03 0.04 0.05 0.06 0.07 0.08 0.09 

0.6915 0.6950 0.6985 0.7019 0.7054 0.7088 0.7123 0.7157 0.7190 0.7224 
0.7257 0.7291 0.7324 0.7357 0.7389 0.7422 0.7454 0.7486 0.7517 0.7549 
0.7580 0.7611 0.7642 0.7673 0.7704 0.7734 0.7764 0.7794 0.7823 0.7852 
0.7881 0.7910 0.7939 0.7967 0.7995 0.8023 0.8051 0.8078 0.8106 0.8133 
0.8159 0.8186 0.8212 0.8238 0.8264 0.8289 0.8315 0.8340 0.8365 0.8389 
0.8413 0.8438 0.8461 0.8485 0.8508 0.8531 0.8554 0.8557 0.8599 0.8621 
0.8643 0.8665 0.8686 0.8708 0.8729 0.8749 0.8770 0.8790 0.8810 0.8830 
0.8849 0.8869 0.8888 0.8907 0.8925 0.8944 0.8962 0.8980 0.8997 0.9015 
0.9032 0,9049 0.9066 0.9082 0.9099 0.9115 0.9131 0.9147 0.9162 0.9177 
0.9192 0.9207 0.9222 0.9236 0.9251 0.9265 0.9279 0.9292 0.9306 0.9319 
0.9332 0.9345 0.9357 0.9370 0.9382 0.9394 0.9406 0.9418 0.9429 0,9441 
0.9452 0.9463 0.9474 0.9484 0.9495 0.9505 0.9515 0.9525 0.9535 0.9545 
0.9554 0.9564 0.9573 0.9582 0.9591 0.9599 0.9608 0.9616 0.9625 0.9633 
0.9641 0.9649 0.9656 0.9664 0.9671 0.9678 0.9686 0.9693 0.9699 0.9706 
0.9713 0.9719 0.9726 0.9732 0.9738 0.9744 0.9750 0.9756 0.9761 0.9767 
0.9772 0.9778 0.9783 0.9788 0.9793 0.9798 0.9803 0.9808 0.9812 0.9817 
0.9821 0.9826 0.9830 0.9834 0.9838 0.9842 0.9846 0.9850 0.9854 0.9857 
0.9861 0.9864 0.9868 0.9871 0.9875 0.9878 0.9881 0.9884 0.9887 0.9890 
0.9893 0.9896 0.9898. 0.9901 0.9904 0.9906 0.9909 0.9911 0.9913 0.9916 
0.9918 0.9920 0.9922 0.9925 0.9927 0.9929 0.9931 0.9932 0.9934 0.9936 
0.9938 0.9940 0.9941 0.9943 0.9945 0.9946 0.9948 0.9949 0.9951 0.9952 
0.9953 0.9955 0.9956 0.9957 0.9959 0.9960 0.9961 0.9962 0.9963 0.9964 
0.9965 0.9966 0.9967 0.9968 0.9969 0.9970 0.9971 0.9972 0.9973 0.9974 
0.9974 0.9975 0.9976 0.9977 0.9977 0.9978 0.9979 0.9979 0.9980 0.9981 
0.9981 0.9982 0.9982 0.9983 0.9984 0.9984 0.9985 0.9985 0.9986 0.9986 
0.9987 0.9987 0.9987 0.9988 0.9988 0.9989 0.9989 0.9989 0.9990 0.9990 
0.9990 0.9991 0.9991 0.9991 0.9992 0.9992 0.9992 0.9992 0.9993 0.9993 
0.9993 0.9993 0.9994 0.9994 0.9994 0.9994 0.9994 0.9995 0.9995 0.9995 
0.9995 0.9995 0.9995 0.9996 0.9996 0.9996 0.9996 0.9996 0.9996 0.9997 
0.9997 0.9997 0.9997 0.9997 0.9997 0.9997 0.9997 0.9997 0.9997 0.9998 


例 2.51 令 Xi(i 
计 P {DPX >7}. 


解 ” 因 为 E[Xi] = 


1,…,10) 是 独立 的 随机 变量 , 每 个 均匀 地 分 布 在 (0,1) 上 . 估 


Var(X6i) = 二 ,由 中 心 极限 定理 ,我 们 有 


10 10 
?位 xs> 直 -? 和 
1 Ca = 


包 1 一 下 (2.19) = 0.0143 轿 
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例 2.52 ”一 种 特殊 型 号 的 电池 的 寿命 是 随机 变量 ,具有 均值 40 小 时 , 标准 差 20 小 
时 . 一 个 电池 使 用 到 失效 , 就 换 一 个 新 的 . 假定 库存 这 样 的 电池 25 个 , 它们 的 寿命 
是 独立 的 . 求 能 得 到 使 用 多 于 1100 小 时 的 近似 概率 . 
解 如 果 我 们 以 X 记 第 i 个 投入 使 用 的 电池 的 寿命 ， 那 么 我 们 要 求 p = 
P{X 十 ,… 十 X25 > 1100}, 它 可 以 近似 如 下 : 
所 P 人 所 十 … 十 X25 一 1000 多 1100 一 oo 
20V25 20V25 
SP{N(0,1) >1}=1— ®(1) = 0.1587 

现在 我 们 介绍 中 心 极限 定理 的 一 个 直观 证 明 . 首先 假定 Xi 有 均值 0 及 方差 1， 

并 且 以 Eletx] 记 它 们 共同 的 矩 母 函数 , 那么 (Xi 十 … 十 Xn)/VR 的 矩 母 函 数 是 


人 
le ST Yl 


现在 , 对 于 很 大 的 n, 我 们 由 ex 的 泰勒 级 数 展 开 得 到 
4X/ VR XX 
XIVB sy 1 + ye 


Vn 2n 
取 期 望 得 , 当 n 大 时 
Eleex/va] = 1 十 TE Cb 
二 1+ 二 。 因为 EIX]=0,EIX4]=1 


2n 
所 以 , 当 n 大 时 我 们 得 到 


sof (G+) 


当 趋向 oo 时 , 可 以 证 明 近 似 值 变 为 精确 值 , 而 且 有 


Xi 十 … 十 Xn _ aa 
ef]- 


从 而 (Xi 十 … 针 Xn)/Vni 的 矩 母 函 数 收 剑 到 具有 均值 0 和 方差 1 的 (标准 ) 正 态 随 
机 变量 的 矩 母 函数 . 用 此 可 以 证 明 , 随机 变量 (Xi + … 十 Xn)/Vn 的 分 布 函数 趋 于 
标准 正 态 分 布 函数 亚 . 

当 Xi 有 均值 / 及 方差 c 时 , 随机 变量 (Xi 一 p)/o 有 均值 0 及 方差 1. 从 而 ， 
以 上 表示 


P {人 半 乓 +- 


5 “< 中 一 sa 


这 就 证 明了 中 心 极限 定理 . 
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2.9 随机 过 程 


一 个 随机 过 程 {X(t),t e T} 是 随机 变量 的 一 个 集合 . 这 就 是 说 , 对 于 每 个 te 
T,X(t) 是 随机 变 基 . 指标 t 常常 解释 为 时 间 , 作为 结果 , 我 们 认定 X(t) 为 过 程 在 时 
间 t 的 状态 (state). 例如 , X(t) 可 以 等 于 在 时 间 t 以 前 曾 进入 超市 的 顾客 总 数 或 者 
在 时 间 t 在 超市 中 的 顾客 总 数 或 者 在 时 间 上 以 前 记录 到 的 市 场 销售 总 量 等 

集合 了 称 为 此 过 程 的 指标 集 (index set). 当 了 是 可 数 集 时 , 随机 过 程 称 为 离散 时 
间 (discrete time) 过 程 . 如 果 T 是 一 个 实数 区 间 ， 随 机 过 程 称 为 连续 时 间 (continuous 
time) 过 程 . 例如 ,，{Xn,n = 0,1,…} 是 一 个 以 非 负 整数 为 指标 的 离散 时 间 随 机 过 程 ， 
而 {X(t),t > 0} 是 一 个 以 非 负 实 数 为 指标 的 连续 时 间 随机 过 程 . 

随机 过 程 的 状态 空间 (state space) 定义 为 随机 变量 入 (t) 所 有 可 能 取 的 值 的 
全 体 . 
于 是 , 随机 过 程 是 一 族 随 机 变量 , 它 描 述 了 某 个 (物理 ) 过 程 经 历 的 时 间 发 展 . 
在 本 教材 以 后 的 各 章 中 , 我 们 将 会 看 到 很 多 随机 过 程 . 

例 2.53 考察 一 个 粒子 沿 圆周 以 0,1,…,m 标识 的 m 十 1 个 顶点 的 一 个 集合 移动 
(参见 图 2.3). 粒子 每 一 步 等 可 能 地 沿 顺 时 针 方向 或 沿 道 时 针 方 向 移动 一 个 位 置 . 也 
就 是 说 , Xn 是 粒子 在 第 n 步 后 的 位 置 , 那么 


es I Rt =3 
其 中 当 i=m 时 i+1=0, 而 当 i=0 时 i-1=m. 假设 现在 粒子 在 0 出 发 , 而 且 持 


续 地 按 上 面 的 规律 移动 , 直至 所 有 顶点 1,…,m 都 访 遍 . 问 顶 点 i(i = 1,…,m) 是 
最 后 访问 的 概率 是 多 少 ? 


图 2.3 粒子 沿 圆周 移动 
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解 ” 令 人 惊讶 的 是 , 顶点 i 是 最 后 访问 的 概率 可 以 不 经 过 计算 就 能 确定 . 为 此 考察 
粒子 首次 到 达 顶 点 i 的 两 个 相 邻 位 置 中 的 某 一 个 的 时 间 , 即 粒子 首次 到 达 顶 点 i 一 1 
或 i+1 (有 m+1=0) 的 时 间 . 假设 它 到 达 顶 点 i 一 1 ( 另 一 种 情形 的 推理 是 一 样 
的 ). 由 于 顶点 i 与 顶点 +1 都 还 没有 访问 到 , 由 此 推出 , 顶点 i 是 最 后 访问 到 的 当 
且 仅 当 i+1 在 i 前 访问 到 . 之 所 以 这 样 是 因为 , 为 了 在 i 前 访问 i+1, 粒子 必须 在 
道 时 针 方向 上 , 在 访问 i 前 遍 访 由 i 一 1 到 i+1 的 所 有 顶点. 但 是 , 在 访问 i 前 从 顶 
点 i 一 1 访问 i+1 的 概率 正 是 一 个 粒子 在 另 一 个 方向 进展 一 步 前 , 在 一 个 特 指 的 方 
向 进展 m 一 1 步 的 概率 . 也 就 是 说 , 它 等 价 于 一 个 开始 时 持 有 一 个 单位 的 财 徒 , 在 一 
枚 均匀 的 硬币 出 现 正面 时 赢 一 个 单位 ,而 出 现 反面 时 输 一 个 单位 , 在 他 破产 前 的 财 
富 增加 到 m -1 的 概率 . 因此 , 因为 上 面 蕴涵 了 顶点 i 是 最 后 访问 的 顶点 的 概率 对 
于 所 有 的 i 是 相同 的 , 又 因为 这 些 概率 的 和 必须 是 1, 我 们 得 到 

P{i 是 最 后 访问 的 顶点 } = 1/m，i= 1 mm 上 
注 用 于 例 2.53 的 推理 , 同时 展示 了 当 每 次 赌博 等 可 能 地 说 或 输 时 , 一 个 财 徒 在 增 
加 到 1 个 单位 前 下 降 到 nn 个 单位 的 概率 是 1/(n 十 1), 或 者 等 价 地 

P{ 财 徒 在 下 降 到 n 个 单位 前 增加 到 1 个 单位 } =n/(n 十 1 
假设 现在 我 们 要 求 财 徒 在 下 降 到 nn 个 单位 前 增加 到 2 个 单位 的 概率 . 取 条 件 于 他 
在 下 降 到 个 单位 前 是 否 到 达 1 个 单位 , 我 们 得 到 
P{ 下 降 到 nn 个 单位 前 增加 到 2 个 单位 } 

=P{ 下 降 到 n 个 单位 前 增加 到 2 个 单位 | 下 降 到 nn 个 单位 前 增加 到 1 个 单位 } 


n 
n+l 
一 P{ 下 降 到 n+1 个 单位 前 增加 到 1 个 单位 ] 

_nt+l n _n 
nt+2n+l n+2 
重复 这 个 推理 得 到 
P{ 下 降 到 nn 个 单位 前 增加 到 个 单位 } 二 二 下 


习 题 


:一 个 倪 中 有 5 个 红 球 、3 个 橙 球 、2 个 蓝 球 . 从 中 随机 选取 了 两 个 球 . 这 个 试验 的 样本 空间 
是 什么 ? 以 X 记 选 出 的 橙 球 数 , X 的 可 能 值 是 什么 ? 计算 P{X = 0}. 

.以 X 代表 抛掷 一 枚 硬币 n 次 得 到 的 正面 数 与 反面 数 的 差 . X 的 可 能 值 是 什么 ? 

在 习题 2 中 , 如 果 假定 硬币 是 均匀 的 , 那么 对 于 = 2, X 可 能 取 的 值 的 概率 是 什么 ? 

假定 一 颗 般 子 被 抛掷 了 两 次 . 下 列 随 机 变量 取 的 可 能 值 是 什么 ? 

(i) 两 次 抛掷 出 现 的 极 大 点 数 . 人) 两 次 抛掷 出 现 的 极 小 点 数 . 

(这 ) 两 次 抛掷 的 点 数 和 . (iv) 第 一 次 抛掷 的 点 数 减 去 第 二 次 抛掷 的 点 数 . 


已 


只 
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多 


10. 
“11. 


12. 


13. 


14. 
15. 


如 果 在 习题 4 中 的 般 子 是 均匀 的 , 计算 (i)~(iv) 中 的 随机 变量 的 概率 . 
假定 抛掷 了 5 枚 均匀 的 硬币 . 以 EE 表示 所 有 的 硬币 都 出 现 正面 这 一 事件 ， 定 义 随机 
变量 


在 原来 的 样本 空间 中 , 哪些 结果 使 Js = 1? P(IE = 1) 是 多 少 ? 
假设 出 现 正面 的 概率 为 0.7 的 一 枚 硬币 被 抛掷 3 次 . 以 X 记 在 这 3 次 中 出 现 的 正面 数 . 确 
定 X 的 概率 质量 函数 


.假设 X 的 分 布 函数 为 


b<0 


MID 


F(b)= 0<sb<1 


1 和 b< oo 
X 的 概率 质量 函数 是 什么 ? 


,如 果 X 的 分 布 函数 为 


b<0 
0<b<1 


1<b<2 


ww 吕 


F(b) = 
2<b<3 


loue 


3<b<3.5 


”三 


b>3.5 


计算 X 的 概率 质量 函数 . 

假定 抛 挪 了 3 颗 均 匀 的 盘子 . 至 少 出 现 一 个 6 的 概率 是 多 少 ? 

一 个 球 取 自 包含 3 个 白 球 和 3 个 黑 球 的 汝 中 . 在 取出 以 后 , 将 它 放 回答 中 , 再 取出 另 一 个 
球 . 如 此 无 穷 地 继续 下 去 . 在 先 取 的 4 个 球 中 , 恰 有 2 个 白 球 的 概率 是 多 少 ? 

在 多 选 考试 中 , 5 个 题 中 的 每 一 个 都 设置 了 3 个 答案 , 学 生 只 和 赁 猜测 能 得 到 4 个 或 更 多 正 
确 答案 的 概率 是 多 少 ? 

某 人 声称 具有 超 感知 觉 (ESP). 作为 测验 , 将 一 枚 均匀 的 硬币 抛掷 了 10 次 , 要 求 他 事先 预 
报 结果 . 此 人 在 10 次 中 猜 中 7 次 . 如 果 他 没有 超 感 知觉 , 他 做 得 至 少 这 样 好 的 概率 是 多 少 ? 
(解释 为 什么 相关 的 概率 用 P{X > 7}, 而 不 是 P{X = 7}?) 

假定 X 是 参数 为 6 和 1/2 的 二 项 随机 变量 . 证 明 X = 3 是 最 可 能 的 结果 . 

假定 X 是 参数 为 n 和 p 的 二 项 随机 变量 . 证 明 : 当 上 从 0 到 n 时 , P{X = 人 } 单调 递增 ， 
然后 单调 递减 , 在 下 述 情形 达到 最 大 值 : 
(a) 在 (n + 1)p 是 整数 的 情形 , 当 上 等 于 (n 十 1)p 一 1 或 者 (n 十 1)p 时 . 
(b) 在 (n 十 1D)p 是 非 整数 的 情形 , 当 大 满足 (n + Up 一 1< 大 < (n 十 1)p 时 . 
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“16. 


17. 


18. 


19. 


20. 


21. 
22. 
“23. 


24. 


25. 
26. 


提示 : 考虑 Fy. 并 找 大 于 或 者 小 于 1 的 值 

航空 公司 知道 预订 航班 的 人 有 5% 最 终 不 来 搭乘 航班 . 因此 ,他们 的 政策 是 对 于 一 个 能 容 
纳 50 个 旅客 的 航班 售 52 张 票 . 问 每 个 出 现 的 旅客 都 有 位 置 的 概率 是 多 少 ? 
假设 一 个 试验 结果 为 个 可 能 的 结果 之 一 , 第 1 个 结果 具有 概率 pi,i 一 1, r, 工 1 Pi 一 
1. 如 果 进 行 了 n 次 这 样 的 试验 , 而 且 此 n 次 试验 中 的 任意 一 个 的 结果 都 不 影响 其 他 n 一 1 
次 试验 的 结果 , 证明， 第 一 个 结果 出 现 zi 次 , 第 二 个 结果 出 现 za 次 ,…, 第 个 结果 出 现 
zr 次 的 概率 是 


nl 


i “se 
它 称 为 多 项 分 布 (multinomial distribution). 
在 习题 17 中 , 以 Xi 记 第 i 个 结果 出 现 的 次 数 , i = 1 
(a) 对 0< j<n, 利用 条 件 概率 的 定义 求 P(Xi = zi,i=1,…,r 一 1|X; =). 

(b) 在 给 定 Xr = j 时 ,你 对 (X1,… ,Xr-1) 的 条 件 分 布 能 得 出 什么 结论 ? 

(ce) 对 (b) 部 分 的 回答 给 出 直观 的 解释 . 

在 习题 17 中 , 以 Xi,i = 1,…,r 记 第 i 个 结果 出 现 的 次 数 . 问 Xi + Xa 十.… 十 Xk 的 概 
率 质量 函 数 是 什么 ? 

某 电视 机 专卖 店 的 店主 断定 , 进入 商店 的 顾客 有 50% 将 购买 普通 电视 机 , 20% 将 购买 彩色 
电视 机 , 而 30% 只 是 浏览 如果 某 日 进 店 5 个 顾客 . 问 2 个 购买 彩电 , 1 个 购买 普通 电视 
机 , 2 个 只 是 浏览 的 概率 是 多 少 ? 

在 习题 20 中 , 店主 在 一 天 售 出 3 台 以 上 ( 含 3 台 ) 电视 机 的 概率 是 多 少 ? 

连续 地 抛掷 一 枚 均匀 的 硬币 . 求 在 第 5 次 正面 首次 出 现 的 概率 . 

连续 地 抛掷 一 枚 正面 出 现 概 率 为 p 的 硬币 直至 出 现 > 次 正面 . 推导 需要 抛掷 的 次 数 X 是 
n(n > r) 的 概率 


当 zl 十 zz 十 … 十 Zr 一 人 几 


| a 


) Pl-p"”, nzr 
它 称 为 负 二 项 分 布 . 
提示 , 在 前 n 一 1 次 抛掷 中 有 多 少 次 成 功 ? 


XX 的 概率 质量 函数 为 
p(k) = ( 0 )ro-w k=0,1... 


对 随机 变量 X 给 以 一 个 可 能 的 解释 . 

提示 : 参见 习题 23. 

在 习题 25 与 习题 26 中 , 假定 两 个 队 玩 一 系列 游戏 , A 队 独 立地 赢 的 概率 是 p, B 队 独 立地 
启 的 概率 是 1 一 p. 先 赢 i 次 游戏 的 队 为 胜利 者 . 

车 i=4. 求 总 共 进行 了 7 次 游戏 的 概率 . 证 明 在 p = 1/2 时 , 此 概率 是 最 大 的 . 

当 (a) i = 2, (b) i = 3 时 求 进行 的 游戏 的 期 望 数 .在 这 两 种 情形 中 , 证 明 当 p = 1/2 时 ， 
这 个 数 是 最 大 的 . 
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27. 


28. 


29. 


30. 


31. 


32. 


33. 


34. 


35. 


36. 


一 枚 均匀 的 硬币 独立 地 抛掷 n 次 , 大 次 由 'A 抛掷 ,对 一 大 次 由 B 抛掷 . 证 明 A 和 B 抛掷 
出 相同 次 正面 的 概率 等 于 总 共有 人 次 正面 的 概率 . 

假定 我 们 需要 生成 一 个 等 可 能 地 取 值 0 和 1 的 随机 变量 z, 而 我 们 用 的 是 一 枚 不 均匀 的 硬 
币 , 在 抛掷 时 , 出 现 正面 的 概率 为 p( 未 知 的 ). 考虑 如 下 的 程式 : 
(1) 抛掷 这 枚 硬币 , 不 管 正面 与 反面 , 以 Oi 记 其 结果 . 

(2) 再 抛掷 这 枚 硬币 , 以 O2 记 其 结果 . 

(3) 如 果 O1 与 O02 相等 , 就 回 到 第 (1) 步 . 

(4) 如 果 O2 是 正面 , 令 X = 0, 否则 , 令 X = 1. 

(a) 证 明 用 此 过 程 生成 的 随机 变量 X 等 可 能 地 取 0 和 1. 

(b) 我 们 能 和 否 用 较 简单 的 程式 ,， 即 连续 地 抛掷 此 硬币 ， 直 到 最 后 两 次 抛掷 结果 不 一 样 为 目 . 
然后 , 如 果 最 后 一 次 是 正面 , 令 X = 0, 而 如 果 最 后 一 次 是 反面 , 令 六 = 1? 

考虑 独立 地 抛掷 一 枚 硬币 n 次 , 每 次 出 现 正面 的 概率 为 p. 当 一 个 结果 与 前 一 个 不 同时 , 我 
们 说 发 生 了 一 次 变更 . 例如 , 如 果 抛 掷 的 结果 是 HH TH TH H T, 那么 总 共 发 生 了 5 次 
变更 . 如 果 p = 1/2, 有 大 次 变更 的 概率 是 多 少 ? 

假定 X 有 参数 为 和 的 泊 松 分 布 . 证 明 当 i 增加 时 , P{X = 计 单调 递增 , 然后 单调 递减 . 当 
i 是 不 超过 和 的 最 大 整数 时 得 到 其 最 大 值 . 

提示 , 考虑 P{X = 讨 /P{X =i 一 1}. 

在 下 列 情形 比较 泊 松 近似 与 正确 的 二 项 概率 . 

(a) P{X=2}, 当 n=8,p=0.1. (b) P{X =9}, 当 n= 10,p= 0.95. 

(e) P{X=0), 当 n=10,p=0.1. (d) P{X =4}, 当 n=9,p=0.2. 

如 果 你 在 50 种 彩票 中 , 各 购买 了 一 张 彩票 , 在 每 种 彩票 中 你 得 奖 的 机 会 是 1/100. 你 得 奖 
数 (a) 至 少 一 张 , (b) 恰好 一 张 , (c) 至 少 两 张 的 (近似 ) 概率 各 是 多 少 ? 

令 X 是 随机 变量 , 具有 概率 密度 


_ | cl-z’), -1<z<l 
六 -{ 0, 其 他 
(a) c 的 值 是 多 少 ? ”(b)X 的 累积 分 布 函 数 是 什么 ? 
令 X 的 概率 密度 为 
/Ge)= c(47—27?), 0<z<2 
0, 其 他 
(a) c 的 值 是 多 少 ?  (b) p {3 <X< 3} =7 
设 X 的 密度 为 


10/z?， 对 于 z > 10 
f(z) = 
0， 对 于 z < 10 
X 的 分 布 是 什么 ? 求 P(X > 20). 
一 个 点 均匀 地 分 布 在 半径 为 1 的 圆 盘 中 , 即 密度 是 
f(ry)=C, Og<r+y<1l 
求 它 与 原点 的 距离 小 于 z(0 < z < 1) 的 概率 . 
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37. 


“38. 


39. 


40. 


41. 
42. 


43. 


44. 


45. 


46. 


令 XX1,X2,… ,Xn 是 独立 随机 变量 , 每 个 都 在 (0,1) 上 均匀 分 布 . 令 M = max(X1, X2,…， 
Xn). 证 明 M 的 分 布 函数 Fu(-) 为 
Fulz)=z", 0<zsl 


AM 的 概率 密度 函数 是 什么 ? 
如 果 X 的 密度 函数 等 于 


0s<o0 


ce-2， 
Jo-{ z<0 


求 c. 再 问 P{X > 2} 是 多 少 ? 
随机 变量 X 有 下 述 概率 质量 函数 


z0D= p= p20) = 


计算 EIX]. 

候 定 两 个 队 玩 一 系列 游戏 ，A 队 独 立地 颜 的 概率 是 P, B 队 独 立地 启 的 概率 是 1 一 p. 先 议 
4 次 游戏 的 队 为 胜利 者 求 进行 的 游戏 的 期 望 数 , 并 在 = 了 时 求 出 这 个 数 

考虑 在 习题 29 中 任意 了 的 情形 . 计算 变更 的 期 望 数 . 

假定 每 张 得 到 的 奖券 与 前 面 已 得 到 的 独立 , 并 且 等 可 能 地 属于 m 种 不 同类 型 中 的 任意 一 
类 . 求 为 合 在 每 个 类 中 至 少 得 到 一 张 所 需 得 到 奖券 的 期 望 数 . 

提示 ， 令 X 是 需要 的 张 数 . 将 X 表示 成 


是 很 有 用 的 , 其 中 Xi 是 几何 随机 变量 . 
一 个 化 中 含有 nn 十 m 个 球 , 其 中 个 红 球 , m 个 黑 球 . 它们 一 次 一 个 从 从 中 不 放 回 地 被 抽 
取 . 以 X 记 在 首次 取得 黑 球 前 取出 的 红 球 个 数 ， 我 们 关心 的 是 确定 ELIX]. 为 了 得 到 这 个 
量 , 将 红 球 用 1 到 n 的 数字 标记 . 现在 随机 变量 Xi(i = 1,…,n) 定义 为 

-0 { 1， 若 红 球 i 在 任意 黑 球 前 取出 

0， 其 他 情形 

(a) 用 Xi 表示 X.。 (b) 求 EIX]. 
在 习题 43 中 , 以 Y 记 在 取 到 第 一 个 黑 球 与 第 二 个 黑 球 间 取 得 的 红 球 个 数 . 
(a) 将 Y 表示 为 每 个 只 取 0 或 1 的 n 个 随机 变量 的 和 . (b) 求 E[Y]. 
(0) 将 E[Y] 与 习题 43 中 得 到 的 E[X] 比较 ， (d) 你 能 否 解释 在 (c) 中 得 到 的 结果 ? 
总 共 个 钥匙 一 次 一 个 地 被 放 进 上 个 盒子 中 ,每 个 以 概率 ps 独立 地 被 放 进 念 子 i 中 ， 
于 和， pi = 1. 每 次 一 个 钥匙 被 放 进 非 空 的 禽 子 , 我 们 就 说 发 生 一 次 磁 擅 . 求 磁 氛 的 期 望 数 . 
如 果 X 是 一 个 非 负 整数 什 随 机 变量 . 证 明 


(a) ELX]= P(X 20)}= 7 P(x >n} 
1 0 


提示 : 定义 随机 变量 序列 mn(n > 1) 为 


习 题 71 


现在 用 In 表示 XX. 
(b) 如 果 X 和 YY 两 者 都 是 非 负 整数 值 随机 变量 , 证 明 


EIXY]= DD P(X >nY >m) 


n=1m=1 


1 


"47， 考虑 三 个 试验 , 其 中 每 个 是 成 功 或 者 不 是 . 以 X 记 成 功 的 次 数 . 假设 E[X] = 1.8. 
(a) P{X = 3} 的 最 大 可 能 值 是 多 少 ? (b) P{X = 3} 的 最 小 可 能 值 是 多 少 ? 
在 这 两 种 情形 , 构造 一 个 概率 方案 使 P{X = 3} 具有 要 求 的 值 

"48, 如 果 X 是 非 负 随机 变量 , 9 是 可 微 函数 且 g(0) = 0, 那么 


Elg(z)] = 人 P(X > bg (bdt 


当 X 是 连续 随机 变量 时 证 明 上 述 结论 . 
"49. 证 明 E[X?] > (E[X])2. 什么 时 候 可 以 取 等 号 ? 
50. 令 e 为 常数 , 证 明 


(1) Var(eX) = c2Var(X); (ii) Var(c+X) = Var(X). 
51， 抛掷 一 枚 出 现 正面 的 概率 为 p 的 硬币 直至 出 现 第 7 次 正面 . 以 N 记 和 需要 抛掷 的 次 数 . 计 
算 EIN]. 


提示 : 做 这 道 题 有 一 个 简单 方法 , 即 以 N 记 个 几何 随机 变 基 的 总 和 . 
52，(a) 计算 习题 37 中 最 大 随机 变量 的 E[X]. (b) 对 于 习题 33 中 的 X, 计算 E[X]. 
(c) 对 于 习题 34 中 的 X, 计算 E[X]. 
53， 如果 X 均匀 分 布 在 (0, 1) 上 . 计算 E[X"] 和 Var(X"). 
54. X 和 了 都 取 值 为 1 或 -1. 令 
p(1,1) =P{X=1,Y =1), 
p(1,-D)=P{X=1,Y=-1)}, 
p(-1D=P{X= -DY=1}， 
p(-1,-1)=P{X =-1,Y = -1} 
假设 E[X] = E[Y] = 0. 证 明 
(a) p(1,1) =7(-1,-1); (b) p(1,—1) =7(-1,D). 
令 p=2p(1,1). 求 (c) Var(X); (d) Var(Y); (e) Cov(X,Y). 
55， 假设 X 和 YY 的 联合 概率 质量 函数 是 


Peeriyr-a- 人 1 ) 0<igj 
i 


(a) 求 Y 的 概率 质量 函数 .(b) 求 X 的 概率 质量 函数 .(c) 求 Y 一 XX 的 概率 质量 函数 . 
56. 有 n 种 类 型 的 奖券 . 每 个 新 得 到 的 奖券 独立 地 是 i 类 的 概率 为 pi,i = 1,…,n. 求 得 自 大 
个 奖券 的 集合 中 不 同类 型 数 的 期 望 和 方差. 
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57. 


58. 


59. 


60. 


61. 


62. 


63. 


“64. 
“65. 


假定 X 和 了 是 具有 参数 (n,p) 和 (m,p) 的 独立 的 二 项 随机 变量 . 概率 角度 地 论述 (不 需 

计算 ) X + Y 是 具有 参数 (n + mp) 的 二 项 随机 变量 . 

一 个 贷 中 有 2n 个 球 , 其 中 有 个 红 球 , 相继 地 随机 抽取 n 对 球 , 以 X 记 抽取 的 一 对 球 都 

是 红色 的 对 数 , (a) 求 E[X], (b) 求 Var(X). 

假定 X1、X2、Xs 和 X4 是 独立 的 连续 随机 变量 , 具有 共同 的 分 布 函数 下 , 并 且 令 
P=P{X < X2 > Xs < X4} 


(a) 证 明 对 于 所 有 连续 分 布 函 数 FF, p 值 不 变 . 
(b) 通过 对 联合 密度 在 合适 的 区 域 上 积分 求 得 p. 
(c) 利用 Xi1,…, Xa 的 所 有 4 个 可 能 的 次 序 是 等 可 能 的 事实 求 得 p. 
假定 X 和 Y 是 独立 随机 变量 , 具有 均值 kz、/ty 和 方差 o2、o2. 证 明 
Var(XY) = 020? + p202 + p202 
假定 Xi, X2，,… 是 一 列 独立 同 分 布 的 连续 随机 变量 . 如 果 X。 > max(X1,…, Xn-1), 我 
们 说 在 时 刻 n 出 现 了 一 个 记录 值 . 即 如 果 Xn > max{X1,…， Xn-1} 则 Xn 是 一 个 记录 
值 . 证 明 
(a) P{ 在 时 刻 n 有 一 个 记录 值 }= 1/n. 
(b) E( 在 时 刻 n 前 的 记录 值 的 个 数 ) = 号 1/i. 
(c) Var( 在 时 刻 n 前 的 记录 值 的 个 数 ) = 号 1(i 一 TD/ 
(d) 令 N = minfn :n> 1, 且 在 时 刻 n 出 现 一 个 记录 值 }. 证 明 E[N] = oo. 
提示 : 对 于 (b) 和 (c), 将 记录 值 的 个 数 表示 为 示 性 ( 即 伯 努 利 ) 随机 变量 的 和 . 
以 al < az < … < an 记 一 组 n 个 数 ,并 且 考 虑 这 些 数 的 任意 排列 . 我 们 说 在 排列 中 a 与 
oj 有 一 个 逆序 , 如 果 i < j 而 且 a; 排 在 at 前 面 . 例如 排列 4, 2, 1, 5, 3 有 5 个 逆序 , 即 
(4,2), (4,1)， (4,3), (2,1), (5,3). 现在 考虑 a1,a2,… ,an 的 随机 排列 , ml 个 排列 中 的 每 一 
个 都 等 可 能 地 被 选 , 以 N 记 一 个 排列 中 的 逆序 的 数目 . 又 令 
Ni = 大 的 数目 , 有 < i, 在 此 排列 中 ai 在 ax 前 面 . 
注意 N = Ni. 
(a) 证 明 Ni,…,Nn 是 独立 随机 变量 ，(b) Ni 的 分 布 是 什么 ? (c) 计算 ELN] 和 Var(N)， 
从 有 nt 个 白 球 和 m 个 黑 球 的 管 中 , 随机 选取 个, 其 中 的 白 球 数 记 为 X. 
(a) 计算 P{X = 守 . 
(b) 对 于 i=1,2,…,k,j = 二 1,2,…,n, 令 
0 { 1， 若 第 守 个 选 出 的 球 是 白 的 。 Y 一 { 1， ”车 白 球 j 被 选 出 
0， ”其 他 情形 0， ”其 他 情形 
首先 将 X 表示 为 Xi 的 函数 , 然后 表示 为 5 的 函数 . 用 这 两 种 方法 计算 E[X]. 
当 X 是 例 2.31 中 选 到 自己 帽子 的 人 数 时 , 证 明 Var(X) = 1. 
连续 地 每 天 发 生 交通 事故 的 次 数 是 独立 的 均值 为 2 的 泊 松 随机 变量 . 
(a) 求 相 邻 的 5 天 中 有 3 天 每 天 都 发 生 2 次 事故 的 概率 . 
(b) 求 相 邻 的 2 天 中 共有 6 次 事故 的 概率 . 
(c) 如 果 每 个 事故 独立 地 是 “大 事故 ”的 概率 为 p, 问 明 天 没有 大 事故 的 概率 是 多 少 ? 


习 题 73 


“66. 


67. 
68. 


69. 


70. 
“71. 
“72. 


“73. 


如 果 对 于 任意 i = 2,… ,n, 随机 变量 X; 都 独立 于 X1,… ,Xi-1. 证 明 XX1,…， Xn 独立 . 
提示 : 若 对 任意 集合 A1,…, An 有 


POG e Aj,j=1,.…,n) = I P(X; € A;), 


i 
则 Xi …，Xn 独立 . 另 一 方面 , 若 对 任意 集合 A1,…, A: 有 , 
P(Xie 4 e Aj,j=1,..,i—1)=P(Xi€ Ai) 


则 Xi 独立 于 XX1，…，Xi-1. 
计算 (0, 1) 上 的 均匀 分 布 的 矩 母 函 数 . 通过 求 微 商 得 到 E[X] 和 Var(X). 
令 X 和风 分 别 表 示 某 台 机 器 工作 的 时 间 和 随后 的 维修 时 间 . 令 Y = X + 你 并 且 假 设 
X 和 了 的 联合 概率 密度 是 

Jxyr(z,y) = Xe ”YY, 0<r<y<o% 
(a) 求 X 的 密度 ， (b) 求 Y 的 密度 (c) 求 X 和 帮 的 联合 密度 (d) 求 W 的 密度 . 
为 了 确定 收取 合适 的 保险 费 , 保险 公司 有 时 使 用 如 下 定义 的 指数 原则 ， 对 于 必须 付 的 随机 
数量 的 索赔 费 X, 保险 公司 收 的 保险 费 为 

P= Lin(Ele*]) 

其 中 a 是 菜 个 特定 的 正常 数 ， 当 X 是 参数 为 的 指数 随机 变量 , 并 且 a = aA 时 , 求 P， 
其 中 0<a<l. 
计算 几何 分 布 的 矩 母 函 数 . 
证 明 独 立 同 分 布 的 指数 随机 变量 的 和 有 伽 马 分 布 . 
连续 的 月 销售 量 是 均值 100 和 方差 100 的 独立 正 态 随机 变量 . 
(a) 求 后 5 个 月 中 至 少 有 一 个 月 的 销售 超过 115 的 概率 . 
(b) 求 后 5 个 月 销售 总 量 超过 530 的 概率 . 
考察 n 个 人 , 假设 每 个 人 的 生日 等 可 能 地 是 这 年 的 365 天 中 的 任意 一 天 . 并 且 假设 他 们 的 


生日 是 独立 的 . 令 A 表示 他 们 中 没有 两 人 在 同一 天 生日 这 一 事件 . 这 ( ) 对 人 中 的 每 


一 对 定义 如 下 的 一 个 试验 : 若 i 和 j(i 关 j) 在 同一 天 生日 , 则 我 们 称 试验 (i, j) 是 成 功 的 
令 S54; 表示 试验 (i,j) 是 成 功 的 这 一 事件 . 

(a) 求 P(S45) 汪 关于 

(b) 在 i,j,k," 各 不 相同 时 , 问 5ij 与 Sk,r 是 否 独立 ? 

(e) 在 jh, 上 各 不 相同 时 , 问 Si,; 于 Sk,; 是 否 独立 ? 

(d) 51,2, 51,3, 52,3 独立 吗 ? 

(e) 用 泊 松 范例 近似 P(A4). 

(f) 在 n= 23 时 , 证 明 上 述 近似 导致 P(A) ~ 0.5. 

(g) 令 B 表示 没有 三 个 人 在 同一 天 生日 这 一 事件 . 近似 地 求 n, 使 P(B) s 0.5. (简单 的 组 
合 推理 能 用 显 式 确定 P(A), 而 要 精确 地 确定 P(B) 却 十 分 复杂 . ) 

提示 : 对 每 一 个 三 人 组 定义 一 个 试验 . 
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“74 


75. 
76. 


77. 
78. 


79. 
“80. 


81. 


82. 


83. 


84. 


“85. 


“86. 


. 若 X 是 参数 为 和 的 泊 松 随机 变量 , 证 明 它 的 拉 普 拉 斯 变换 是 


g(u) = Ele-*x] = exe -0 

考虑 例 2.48. 利用 ars 求 Cov(Xi, Xi). 

用 切 比 雪夫 不 等 式 证 明 弱 大 数 定律 , 即 如 果 Xi, XX2,… 独立 同 分 布 ， 具 有 均值 上 和 方差 
02, 那么 对 于 任意 = > 0, 车 n 一 co, 则 


P(e - >j-。 


如 果 X 是 均值 为 10 和 方差 为 15 的 随机 变量 , 那么 P{5 < X < 15} 是 多 少 ? 
如 果 X1,… ,Xio 是 独立 的 泊 松 随机 变量 , 具有 均值 1. 

(a) 用 马尔 可 夫 不 等 式 给 出 P{Xi 十 … 十 X10 > 15} 的 一 个 界 . 

(b) 用 中 心 极限 定理 近似 P{X1 十 … 十 Xio > 15}. 

如 果 X 服从 正 态 分 布 , 具有 均值 1 和 方差 4. 用 表 求 出 P{2 < X < 3}. 

证 明 


Per 
提示 : 令 Xn 是 均值 为 n 的 泊 松 随机 变量 . 用 中 心 极限 定理 证 明 P{Xn < n} 一 1/2. 
假定 X 和 Y 是 独立 正 态 随机 变量 , 都 具有 均值 J 和 方差 o?. 证 明 鲜 十 Y 与 XX 一 Y 独 
提示 : 求 它们 的 联合 矩 母 函数 . 
将 Xi，…,Xn 的 联合 矩 母 函 数 记 为 9(t1,… ,tn). 
(a) 解释 如 何 从 p(t1,……,tn) 得 到 X 的 矩 母 函数 Bx, (ti). 
(b) 证 明 X1,… ,Xn 独立 当 且 仅 当 gba ,tn) = Bx (1) … xn (tn). 
若 K(t) = In(Ele:*]), 证 明 

K’(0) = EIX]， K”(0)= Var(X) 
令 X 表示 事件 41,… ,An 的 发 生 数 . 用 量 Sk = 二 < caP(4 4 人 = 1 mm) 
表示 E[X]、 Var(X) 和 sl[( 和 )] 


随机 变 最 的 标准 差 是 它 的 方差 的 正平 方 根 . 以 ox 和 oy 表示 随机 变量 X 和 Y 的 标准 关 ， 
我 们 定义 X 和 的 相关 系数 为 

1 

Cor(X,Y) = EY 
oxoY 

四 从 不 和 起 Var (二 + 六 ) > 0 出 发 ,证 明 -1 < Corr(X,Y). 
(b) 证 明 不 等 式 -1 < Corr(X,Y) < 1. 
(ec) 车 ox+y 是 羡 十 Y 的 标准 差 , 证 明 cx+y < ox 十 oy- 
捐赠 图 书馆 的 每 本 新 书 必须 经 过 处 理 . 假设 管理 员 处 理 一 本 书 的 平均 时 间 为 10 分 钟 , 标准 
差 为 3 分 钟 . 假设 管理 员 每 次 必须 处 理 40 本 书 . 


“87. 
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(a) 求 处 理 这 些 书 的 时 间 超过 420 分 钟 的 近似 概率 
(b) 求 在 240 分 钟 内 处 理 至 少 25 本 书 的 近似 概率 . 
回忆 车 X 的 密度 是 f(z) = Xe-Y(Az)”1/T(a),z > 0, 则 X 称 为 参数 (a, 入 ) 的 伽 马 随 
机 变量 . 
(a) 若 2 是 标准 正 态 随机 变量 , 证 明 2? 是 参数 (1/2, 1/2) 的 伽 马 随机 变量 . 
(b) 若 1，… ,Zn 是 标准 正 态 随机 变量 , 则 于 ”22 称 为 具有 n 个 自由 度 的 卡 方 随机 变 
量 . 请 你 解释 如 何 用 例 2.39 说 明 "2? 的 密度 函数 是 
ez/2zm/2-1 
f(z)= BT 
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3.1 3 引 言 


概率 论 中 最 有 用 的 概念 就 包括 条 件 概率 与 条 件 期 望 ， 其 原因 有 两 方面 首先， 
在 实践 中 我 们 常常 对 于 计算 在 部 分 信息 已 知 时 的 概率 和 期 望 感 兴趣 , 这 样 的 概率 和 
期 望 就 是 条 件 概率 和 条 件 期 望 .其 次 , 在 计算 需要 的 概率 或 期 望 时 , 在 某 些 适当 的 
随机 变量 上 取 条 件 是 极其 有 用 的 方法 . 


3.2 离散 情形 


回忆 一 下 , 对 于 任意 两 个 事件 巨 和 F, 当 P(F) > 0 且 给 定 已 时 , 忆 的 条 件 概 

率 定义 为 (加 有 
P(EIF)= PE 
因此 , 如 果 X 和 了 都 是 离散 随机 变 基 , 那么 对 于 所 有 使 P(Y = vy) > 0 的 y 值 , 在 
Y =y 给 定 的 条 件 下 , X 的 条 件 概率 质量 函数 自然 地 定义 为 
pxly(z19) =P{X=z|Y=Yy}= 了 下 全 自 了 re 

类 似 地 , 对 于 所 有 使 P(Y = vy) > 0 的 y 值 , 在 Y =y 给 定 条 件 下 , X 的 条 件 概 率 分 
布 函数 定义 为 


Fxly(zly) =P{X < zlY =Y} = > pxlr(oly) 


agz 
最 后 , 在 Y =Y 给 定 的 条 件 下 , X 的 条 件 期 望 定义 为 
ElXlY =y] = DzP{X =zlY =Y} = Dzpxly(zly) 
换 句 话说 , 除了 对 事件 了 =y 取 条 件 以 外 , 定义 恰 如 以 前 所 述 . 如 果 与 Y 独 


立 , 那么 条 件 概率 质量 函数 、 条 件 分 布 函数 和 条 件 期 望都 与 无 条 件 时 一 样 . 这 是 因 
为 如 果 关 与 Y 独立 , 那么 


pxly (zly) =P{X= zlY =y} =P{X=2} 
例 3.1 假定 X 和 了 Y 的 联合 概率 质量 函数 p(z,y) 为 
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p(D) =05，p(2)=01 p(2,1)=0.1, p(2,2)=03 
计算 在 Y = 1 给 定 的 条 件 下 X 的 条 件 概率 质量 函数 . 
解 ”我 们 首先 注意 


py()= Dp(z,1) =p(1,1) +p(2,1) =0.6 
EE 人 


因此 
a a ai PR LY} Rb 
pxlr(1ll) =P{X=1lY =1}= 一 下 
类 似 地 pe 
Pe a 
Pxly(2|1) = p06 nm 


例 3.2 ”假定 Xi 和 Xs 分 别 是 具有 参数 (na,p) 与 (na,p) 的 独立 二 项 随机 变量 , 计 
算 在 X? + Xs2 = mm 给 定 的 条 件 下 Xi 的 条 件 概率 质量 函数 . 
解 ” 对 于 gq=1-p， 

P{Xi = 由 Xi + Xa =m}= P+ 2 wl 
_ P{X1 =k,X2 =m—k} 
~ P{X1+X2=m} 
_ P{X1 =k}P{X2 =m—k} 
~ P{Xi+X2 =m} 


ml kom-k( "2 mk jn2 一 m 十 上 
_ (Dr Cj 
© i 
m 


其 中 我 们 用 了 Xi + X2 是 具有 参数 (ni +n2,p) 的 二 项 随机 变量 (参见 例 2.44). 于 
是 , 在 Xi + X2 = m 给 定 的 条 件 下 Xi 的 条 件 概率 质量 函数 是 


n1 n2 
P{X = kX1+ X2 =m} = 人 Ge (3.1) 

全 | 

m 

方程 (3.1) 中 的 分 布 , 首次 见于 例 2.35 中 , 名 为 起 几何 分 布 . 这 是 从 装 有 ni 个 蓝 球 
和 nz 个 红 球 的 倪 中 , 随机 选取 的 m 个 球 的 样本 中 的 蓝 球 个 数 的 分 布 . (直观 地 看 为 
什么 此 条 件 是 超 几 何 分 布 , 我 们 考虑 ni + ma 次 独立 试验 , 每 次 试验 成 功 的 概率 为 
p. 假定 Xi 表示 前 n 次 试验 中 成 功 的 次 数 , X 表示 最 后 na 次 试验 中 成 功 的 次 数 . 
由 于 所 有 的 试验 成 功 的 概率 是 相同 的 , m 次 试验 的 他 | 个 子 集中 的 每 一 个 


m 
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都 等 可 能 地 是 成 功 的 试验 . 从 而 , 在 前 ni 次 试验 中 m 次 成 功 试验 的 个 数 是 超 几 何 
随机 变量 .) 国 
例 3.3 假定 X 和 工分 别 是 具有 参数 Xi 与 Xa 的 独立 泊 松 随机 变量 . 计算 在 给 定 
六 +Y =n 的 条 件 下 XX 的 条 件 期 望 . 
解 : ”我 们 先 计算 在 六 十 Y =n 给 定 的 条 件 下 XX 的 条 件 概 率 质量 函数 . 我 们 得 到 
P{X=k,X+Y =n} 
P{X+Y =n} 
_ P{X=kY=n—k} 
~ P{X+Y=n} 
_ P{X=k}P{Y =n—k} 
P{X+Y =n} 
其 中 最 后 的 等 式 由 假定 X 与 Y 独立 得 到 . 回忆 起 (参见 例 2.37)X +Y 是 具有 均值 
和 1 十 和 2 的 泊 松 分 布 , 上 面 的 方程 等 于 
e- 和 和 BAS e- MN+t%2) (A + A2)"1-1 
Kk! sl ] 
_ nl 2 
(nn — Rk)!Ik! (M1 + M2)™ 


_fn 六 

h 的 Gi) G5) 
换 句 话说 , 在 义 十 Y = n 给 定 的 条 件 下 XX 的 条 件 分 布 是 参数 为 和 Xi/(Al 十 和 2) 
的 二 项 分 布 . 因此 No 


P{X=k|X+Y =n}= 


P{X=kIX+Y =n}= 


nl! 


EXR m= 站 国 
条 件 期 望 具有 普通 期 望 的 一 切 性 质 诸如 恒等式 
|x -| -see = 中 
Bh =d = Bhp =aly = 

仍然 有 效 
例 3.4 ”有 n 个 部 件 对 于 11,…,n, 部 件 i 在 南天 运转 的 概率 为 ps, 在 非 南天 
运转 的 概率 为 w. 明天 将 下 南 的 概率 为 a. 计算 给 定 明天 下 十 时 , 运转 的 部 件数 的 
条 件 期 望 
解 令 


和 1， 部 件 1 明天 运转 
“0， 其 他 情形 
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如 果 明 天 下 雨 , 定义 Y 为 1, 而 在 相反 情形 定义 Y 为 0, 那么 , 所 求 的 条 件 期 望 为 


= 人 sr-， = SEY =1 = Dn 国 
3.3 连续 情形 


如 果 X 和 Y 有 联合 密度 函数 f(z,y), 那么 对 于 所 有 fy(y) > 0 的 y 值 , 给 定 
Y =y 时 X 的 条 件 概 率 密 度 函 数 定义 为 
fxlr (zly) = 人 
为 了 给 出 这 个 定义 的 动机 , 我 们 将 左边 乘 以 dz, 右边 乘 以 (dzdy)/dy 得 到 
f(z,y)drdy 
fy(y)dy 
~P{z<X<zrt+dry<Y <yt+dy} 
Ply <Y <y+dy} 
=P{z < X<zrt+dry <Y <y+dy} 
换 句 话说 , 对 于 小 的 值 dz 和 dy, fxly(zly)dz 近似 地 是 给 定 Y 在 y 和 y+dy 之 间 
时 ,六 在 z 和 z+dz 之 间 的 条 件 概 率 . 
对 于 所 有 fy(y) > 0 的 y 值 , 给 定 Y =y 时 XX 的 条 件 期 望 定义 为 


EECIY =y = zfxv(lyar 
例 3.5 假定 和 六 有 联合 密度 
en-{ a 0<z<l0<y<1 


jxly(zly)dz= 


其 他 
对 于 0<y<1, 计算 给 定 Y=y 时 X 的 条 件 期 望 
解 ”我 们 首先 计算 条 件 密度 


fxly (zly)= 


f(y) _ _ 6ry(2— 7—Y) 


fr(y) J exe —I—Yydr 


全 6zy(2 —z —y) _ 67(2—z—Yy) 
oy4-3y) 4-3y 
因此 (2_ 2 6 
1 六 6z2(2 一 z 一 y)dz “W745-4y 
ex =y =| 4 二 3 4-3 © 8-6y 
例 3.6 (t 分布) 车 Y 和 2 是 独立 的 随机 变量 , Z 具有 标准 正 态 分 布 , 而 Y 是 具 
有 个 自由 度 的 卡 方 分 布 , 则 由 
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2 2 

VY/n 加 Ma 

定义 的 随机 变量 7 称 为 个 自由 度 的 t+ 随机 变量 . 为 了 计算 它 的 密度 函数 , 我 们 首 
先 推导 在 给 定 Y =y 时 了 的 条 件 分 布 . 因为 Y 和 2 是 独立 的 , 在 给 定 Y=y 时 了 
的 条 件 分 布 是 Vn/y2 的 分 布 , 它 是 均值 为 0 和 方差 为 n/y 的 正 态 分 布 . 因此 在 给 
定 Y=y 时 7 了 的 条 件 密度 函数 是 


Th 


friv (tly) = A = ,0 <t<o0 
上 式 结合 在 第 2 章 习 题 87 中 推导 的 卡 方 密度 的 公式 
ey/2y"/2-1 


六 人 = ZT) y>0 


就 得 到 的 密度 函数 
/=| trv)ay = friy (tly)fy (Way. 


记 


1 t+n_1 
K=- a an 7a 人 中 5)， 
则 由 上 面 结果 可 得 
i 
二 一 —cyy(n—1)/2. 
= 冯 | eoo-opsy 
c-(n+D)/2 


oo 
= 一 关 | e-zz(n-D)/2dz ( 令 z=cy) 


0 
c-(n+D/2 /nt+l 
= r 
x (3 ) 
n+l 
(到 1) 12\ -On+D12 
-< (+5) 1 —00<t<o0 
F (3) vu 
例 3.7 XX 和 Y 的 联合 密度 为 
1 
1 二 ye-z，0<z<oo0<y<2 
ron- 2 和 


0， 其 他 
E[ex/2|Y = 1] 是 多 少 ? 
解 给 定 了 =1 时 X 的 条 件 密度 为 


1 一 z 
fc -2 
Fy) eer 
0 


Jxir(zlD = 
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因此 , 由 命题 2.1 
Ele*/2|Y =1]= | ez/2fxly(zll)dz = | ez/2e-zdz =2 
o 0 


例 3.8 令 X 和 X2 是 参数 分 别 为 /a 和 心 的 独立 指数 随机 变量 . 求 给 定 X1+X2 = 
t 时 X 的 条 件 密度 . 
解 ”我 们 首先 以 f(z,y) 记 X 和 Y 的 联合 密度 , 那么 六 和 XX +Y 的 联合 密度 就 是 
fxx+Y(z,t) = f(z,t— 7) 
由 变换 
gi(zY) =7, go(7,Yy) 一 工 十 3 
的 雅 可 比 行列 式 等 于 1, 可 以 很 容易 地 得 到 上 式 . 
将 上 式 用 到 我 们 的 例子 , 得 到 


Jalpa+xa(z 旧 一 sxa+xa(z 昌 


fxi+xalt) 

Ne- Mirp2e-H2(t-7) 
四 DO 
=Ce (ta)s, 0Sz<t 


，0< 和 zs<kt 


其 中 


_ Hike tt 
fxi+xalt) 


现在 , 如 果 jn = 2, 那么 
fxilxi+xa(Tlt)=C, Og<z<t 
这 推出 C = 1/t, 以 及 在 给 定 Xi + X2 = 上 时 Xi 为 (0,t) 上 的 均匀 分 布 . 另 一 方面 ， 
如 果 jn zp2, 那么 我 们 利用 
2 — e-(m-pa)t) 


t 
1= h fxilxi+xa(Tlt)dz = 二 


| Hi— HH2 
rE 
于 是 有 结果 ， 一 (Ai 一 pz)z 
fxlxi+xa(Tlt) = ee 
以 上 分 析 有 一 个 有 趣 的 副产品 
2te 一 此 i 
fxi+xzalt) = i be ey 一 et) 和 mn 
一 车 jn 关 j2 
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3.4 ”通过 取 条 件 计算 期 望 


我 们 以 E[XIY] 记 随 机 变量 Y 的 这 样 的 函数 ， 它 在 Y = y 处 的 取 值 是 
EIXIY = g]. 注意 EIXIY] 本 身 是 一 个 随机 变量 ， 条 件 期 望 的 一 个 极为 重要 的 性 
质 是 : 对 于 所 有 的 随机 变量 X 和 了 有 


E[X] = E[EIxi]] (3.2) 


如 果 是 离散 随机 变量 , 那么 公式 (3.2) 说 明 


EI[X] = ELIXIY =yP{Y = 分 (3.2a) 
如 果 Y 是 密度 为 fy(y) 的 连续 随机 变 基 , 那么 公式 (3.2) 说 明 
Bx]= | pr=wmw (8.2b) 


现在 我 们 对 X 和 Y 都 是 离散 随机 变量 的 情形 给 出 公式 (3.2) 的 一 个 证 明 . 
X 和 Y 都 是 离散 随机 变量 时 公式 (3.2) 的 证 明 
我 们 必须 证 明 
EIX]= > EIXIY =yP{Y =vy} (3.3) 
3 


现在 , 上 式 的 右边 可 以 写 为 
DELXIY =yP{Y =y}= DrP{X =zlY =y}P{Y =Y) 
六 y 


P{X=z,Y= 
= Y= 
Vz 
= ,P(X=2,Y=Y) 
工 y 
1 =D_zP{X=z}= EX) 


这 就 得 到 结果 . 
为 了 理解 公式 (3.3), 我 们 做 如 下 的 解释 . 公式 (3.3) 说 明 对 于 计算 E[X], 我 们 
可 以 取 在 =y 给 定时 X 的 条 件 期 望 的 加 权 平均 , 每 一 项 E[X|Y =y] 用 取 条 件 的 
那个 事件 的 概率 加 权 . 
以 下 的 例子 会 显示 出 公式 (3.2) 的 用 途 . 
例 3.9 ”山姆 准备 读 一 章 概率 书 或 一 章 历 史书 . 如 果 在 他 读 的 一 章 概率 书 中 的 印刷 
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错误 数 有 均值 为 2 的 泊 松 分 布 ,而 在 他 读 的 一 章 历史 书 中 的 印刷 错误 数 有 均值 为 5 
的 泊 松 分 布 ,那么 在 假定 山姆 选取 哪 一 本 书 是 等 可 能 时 , 山姆 遇 到 的 印刷 错误 数 的 
期 望 旦 多 少 ? 
解 以 X 记 印 刷 错误 数 , 令 
六 _ 人 1， 如果 山姆 选取 历史 书 。 
2， 如 果 山姆 选取 概率 书 


E[X]= E[XIY = 1]JP{Y = 1} + ELX|Y = 2]P{Y = 2} 


7 

=5(3) +2(3) =3 
A 
为 4. 又 假定 在 每 次 事故 中 受伤 工人 数 是 具有 相同 均值 2 的 独立 随机 变 基 . 再 假定 
在 每 次 事故 中 受伤 工人 数 与 每 周 发 生 的 事故 数目 相互 独立 ， 每 周 受伤 人 数 的 期 望 
是 多 少 ? 
解 ”以 N 记事 故 次 数 , 以 Xi 记 在 第 i 次 事故 中 的 受伤 人 数 ,i= 1,2,…, 那么 伤 者 
总 数 可 以 表示 为 忆 半 ,Xi. 现在 


B | -sf [Sx]| 


E [Ex] =E [xn 
=E bed (由 N 和 Xi 独立 ) 


=nE[X] 
由 它 导出 


E 3 xi = NEI[X] 


E 加 | = E[NE[X]] = E[IN]JE[X] 


所 以 , 在 我 们 的 例子 中 , 在 一 周 中 受伤 人 数 的 期 望 为 4x 2 = 8. 国 

随机 变量 学 全， Xi; 等 于 N 个 独立 同 分 布 的 随机 变量 的 和 , 它 称 为 复合 随机 变 
量 . 正如 例 3.10 所 示 , 这 个 复合 随机 变 基 的 期 望 值 是 E[N]E[X]. 它 的 方差 将 在 例 
3.19 中 推 得 . 
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例 3.11( 几 何 分 布 的 均值 ) ”连续 抛 搓 一 枚 正面 出 现 的 概率 为 p 的 硬币 直至 出 现 正 
面 为 止 . 问 需要 抛掷 的 次 数 的 期 望 是 多 少 ? 
解 ”以 N 记 需 要 抛掷 的 次 数 , 而 令 

{ 1， 如 果 第 一 次 抛掷 的 结果 是 正面 

“人 0， 如 果 第 一 次 抛掷 的 结果 是 反面 


现在 
E[IN]= EIN|Y = 1]JP{Y = 1} + E[N|Y = OjP{Y = 0} 


=PE[IN|Y = 1]+(1—p)EIN|Y = 0] (3 


然而 
EINIY =1]=1, EIN|Y =0]=1+EIN] (3.5) 
为 了 明白 为 什么 式 (3.5) 是 正确 的 , 我 们 考察 EIN|Y = 4J， 由 于 Y = 1, 我 们 知 
道 第 一 次 抛掷 的 结果 是 正面 , 所 以 , 需要 抛掷 的 次 数 的 期 望 是 1， 另 一 方面 , 如 果 
Y = 0, 那么 第 一 次 抛掷 的 结果 是 反面 . 然而 , 由 于 假定 相继 的 抛掷 是 独立 的 , 这 就 
推出 在 第 一 次 出 现 反面 后 直到 正面 首次 出 现时 的 附加 抛 搓 次 数 的 期 望 是 EIN]. 因 
此 ELINIY=0=1+EN]. 将 式 (3.5) 代入 方程 (3.4) 推出 
EINI=p+(L -PE+ELN) 

人 EIN] = 1/p 四 

因为 随机 变 基 N 是 具有 概率 质量 函数 p(n) = p(1 一 p)"! 的 几何 随机 变量 , 它 
的 期 望 可 以 很 容易 地 由 E[N] = ?2 np(n) 算出 , 而 无 需求 助 于 条 件 期 望 . 然而 , 如 
果 你 想 不 用 条 件 期 望 而 得 到 我 们 下 一 个 例子 的 解 , 你 将 很 快 领会 “ 取 条 件 ” 这 个 技 
巧 是 多 么 有 用 . 
例 3.12 某 矿 工 身 陷 在 有 三 个 门 的 矿井 之 中 . 经 第 一 个 门 的 通道 行进 两 小 时 后 , 他 
将 到 达 安 全 地 . 经 第 二 个 门 的 通道 前 进 三 小 时 后 , 他 将 回 到 原 地 . 经 第 三 个 门 的 通道 
前 进 五 小 时 后 , 他 还 是 回 到 原 地 . 假定 这 个 矿工 每 次 都 等 可 能 地 选取 任意 一 个 门 , 问 
直到 他 到 达 安 全 地 所 需 时 间 的 期 望 是 多 少 ? 
解 ” 令 X 记 矿工 到 达 安 全 地 所 需 的 时 间 , 以 Y 记 他 最 初 选取 的 门 . 现在 

E[X]= E[XIY = 1JP{Y =1} + ELXIY =2]P{Y =2} + EIXIY = 3]P{Y = 3} 
世 3(EIXIY =1]+E[XIY =2]+E[XIY =3)]) 

然而 

E[XIY =1]=2, EIXIY=2]=3+EX], EI[XlY =3]=5+EX] (3.6) 


为 了 理解 为 什么 这 是 正确 的 , 我 们 以 E[X|Y = 2] 为 例 给 出 如 下 推理 . 如 果 矿 工 选取 
第 二 个 门 , 那么 三 小 时 后 他 将 回 到 原 地 . 一 旦 他 回 到 了 原 地 , 问题 就 和 以 前 一 样 了 ， 
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而 直到 他 到 达 安 全 地 的 附加 时 间 的 期 望 正 是 ELX]. 因此 E[X|Y = 2] = 3+E[X]. 
式 (3.6) 中 其 相 敌 式 的 推理 站 相册 的 : 因此 
E[X]= 3 +3+EIXI+5+E[X]) 也 就 是 EIX] = 10 国 


例 ee 考察 n 次 独立 试验 , 每 次 的 结果 分 别 以 概率 
Pr 取 1… ,Tr 之 一 ,Pi 十 … 十 pr =1. 若 我 们 将 出 现 结果 ;的 试验 的 次 数 记 
为 Ni, 则 称 (Ni,……,Nr) 具有 多 项 分 布 . 对 于 ii 敌我 们 来 计算 

Cov(Ni, Ni) = E[NiNj] — EINi]E[N;] 
因为 每 次 试验 独立 地 以 概率 p; 出 现 结果 i, 由 此 推出 Ni 是 参数 为 (n,pi) 的 二 项 随 
机 变量 , 可 知 E[Ni]E[Nj] = n2pipj. 为 了 计算 EINiNj], 我 们 取 条 件 于 Ni 得 到 

EINN]=》 EINiN;IN: = KAP{N: = k} 
k=0 
= kE[N;|N;: = kJP{N: = k} 


现在 , 在 给 定 |; n 次 试验 中 出 现 k 次 纺 果 i 时 ,其 他 n 一 大 次 试验 独立 地 以 概率 
POI 非 i) = 1 = 上 时, Ni 的 条 件 分 布 是 参数 


ep 


EINiN;] = py 一 月; 2 元 PUN = 村 
三 es( DP =k) 一 A = 9) 
=| 
Te (EIN EIN?]) 


又 因为 Ni 是 参数 为 (n， 的 二 项 随机 变 基 ， 
EIN?] = Var(Ni) + (ELN]) = npi(1 ~— pi) + (npi)” 


因此 


EINN] = 7 [om — npi(1 — pi) ~ np] 
= ln np (1p) = n(n ~ Dpipy 
由 此 得 出 结论 
Cov(Ni, Nj;) = n(n — 1)pip; — npip; = —npipj 国 
例 3.14( 匹 配 轮 数 问题 ) ”假设 在 例 2.31 中 取 到 自己 的 帽子 的 人 离开 , 而 其 余人 ( 没 
有 匹配 到 的 那些 人 ) 将 他 们 取 的 帽子 放 到 房间 中 央 , 混杂 后 重新 取 . 假定 这 个 过 程 
连续 进行 到 每 个 人 都 取 到 了 自己 的 帐 子 为 上 
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(a) 假定 R 是 开始 时 有 n 个 人 出 席 所 需要 的 轮 数 . 求 E[R]. 

(b) 假定 S" 是 开始 时 有 n(n > 2) 个 人 所 需要 的 选取 总 次 数 , 求 E[S"]. 

(c) 求 此 n(n > 2) 个 人 误 取 的 期 望 数 . 
解 (a) 由 例 2.31 推出 , 不 论 留 在 那里 的 人 有 多 少 , 平均 每 轮 有 一 次 匹配 . 这 就 使 
人 想到 E[R] = n. 这 个 结果 是 正确 的 , 现在 给 出 一 个 归纳 性 的 证 明 . 由 于 显然 有 
E[R1] = 1, 假定 对 于 大 = 1,…,n 一 1 有 E[Rk] = 大 为 了 计算 E[Ra], 我 们 先 对 第 一 
轮 中 的 匹配 数 X,, 取 条 件 . 它 给 出 


la = 并 BEIR.IXs = P(X, = 
i=0 


现在 , 给 定 最 初 一 轮 的 全 部 匹配 数 i, 需要 的 轮 数 将 等 于 1 加 上 余下 的 n 一 i 个 人 匹 
配 他 们 的 帽子 需要 的 匹配 轮 数 . 所 以 


BlRd= DG + ElRn iD)P(X = 


i=0 


=1 十 E[Rn]P{Xn = 0}+ TER dP{X, = 让 
记 1 


=1+E[Rn]P{Xn = 0} 十 -opt 一 讨 由 归纳 法 假设 

-1+EIRJPUG = 0} +n(1 — P{X, =0}) — ELX,] 

=E[RJP{X, = 0} +n(1—P{X, =0}) 
其 中 最 后 一 个 等 式 用 了 例 2.31 建立 的 结果 E[Xn] = 1. 由 上 面 的 方程 推出 E[Rn] = 
n, 结论 得 证 . 

(b) 对 于 n > 2, 取 条 件 于 第 一 轮 中 的 匹配 次 数 X，, 给 出 
Bloj= DEIS,lX, =ilP{X, = 
i=0 


= (n+E[S。i)P{Xn = 计 


i=0 


=n+ 3 ElS。iP{Xn = 
i=0 


其 中 ElSo] = 0. 为 求解 上 面 的 方程 , 我 们 将 它 改写 为 

E[Sn] =n+E[Sn_x,] 
现在 , 如 果 在 每 轮 中 恰 有 一 次 匹配 , 那么 共有 1+2 十 … 十 n= n(n 十 1)/2 次 选取 . 
于 是 , 我 们 可 以 试探 形式 为 E[S"] = an + bn? 的 解 . 为 使 该 解 在 n > 2 时 满足 上 面 
的 方程 , 我 们 需要 
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an 十 bn2 =n+Ela(n— Xn)+b(n— Xn)’] 
或 者 , 等 价 地 
am 十 bn2 =n+a(n— EIXn]) +b(n? — 2nE[Xn] + E[X2]) 
现在 , 用 例 2.31 和 第 2 章 的 习题 72 得 到 的 E[Xn] = Var(Xn) = 吉 只 要 有 
ant+bn?=n+an—at+bn?—2nb+2b 
上 面 的 方程 就 得 到 满足 , 而 当 b= 1/2,a = 1 时 它 成 立 . 即 
E[Sn] =n+n?/2 


满足 ElSn] 的 递 推 方程 . 

ESn] = n 十 m2/2,n >2 的 形式 证 明 由 对 mn 作 归纳 法 可 得 . 当 n = 2 时 , 它 是 正 
确 的 (因为 这 时 选取 次 数 是 轮 数 的 两 倍 , 而 轮 数 是 参数 为 p = 1/2 的 几何 随机 变 基 ). 
现在 递 推 关系 给 出 为 


E[Sn] =m +E[Sn]P{Xn = 0} 十 bs E[Sn_iP{Xn = 让 
i=1 
因此 , 由 假定 E[So] = E[S1] = 0, E[Sk] = 尺 十 上 /2,k = 2,…,n 一 1, 并 且 用 
P(Xn =n 一 1) = 0, 我 们 得 到 
E[Sn]= n+ E[Sn]JP{Xn = 0}+ Er —i+(n—i)?/2P{Xn =i} 
=n+E[Sn]P{Xn =0}+(n + aad —P{Xn=0})—(n+ 1)E[Xn]+E[X2]/2 
将 等 式 E[X,] = 1,E[X3] = 2 代入 上 面 得 
E[Sn] =m 十 n2/2 
这 就 完成 了 归纳 证 明 . 
(c) 我 们 记 第 7 个 人 取 的 帽子 数 为 Cj,j = 1,…,n, 那么 
Yo = Sn 
j=1 
取 期 望 , 并 用 每 个 C; 具有 同样 的 均值 这 个 事实 推出 如 下 的 结果 : 
E[C;] = E[Sn]/n=1+n/2 
因此 , 第 j 个 人 错 取 帽 子 的 期 望 为 
E[C; —1]=n/2 加 


例 3.15 ”连续 地 做 每 次 成 功 的 概率 为 p 的 独立 试验 , 直至 及 次 相继 的 “成 功 ”. 
问 必须 试验 的 次 数 的 均值 是 多 少 ? 
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解 ”以 Nk 记得 到 上 次 相继 的 成 功 必须 做 的 试验 次 数 , 并 记 Mi = ELNk]. 我 们 将 
推导 然后 求解 一 个 递 推 方程 确定 Mi. 我 们 从 写 出 如 下 等 式 开始 


Nk = Nk-1 + Ak—lk 


其 中 Nk-1 是 达到 相继 的 上 一 1 次 成 功 所 必须 的 试验 次 数 , 而 Ak-1,k 是 从 已 有 的 相 
继 上 一 1 次 成 功 的 一 列 试验 直至 相继 上 次 成 功 的 一 列 试验 的 附加 次 数 . 取 期 望 后 得 
出 
Mi = Mk-1 + E[Ak-1,x] 

为 了 确定 E[4k-1xk], 以 相继 上 一 1 次 成 功 的 一 列 试验 之 后 的 下 一 次 试验 为 条 件 . 若 
下 一 次 试验 成 功 , 则 它 正 给 出 了 一 列 试验 中 的 相继 上 次 成 功 , 其 后 的 附加 试验 就 无 
必要 ; 若 下 一 次 试验 失败 , 则 我 们 必须 在 此 处 重新 开始 , 所 以 此 后 的 平均 附加 次 数 
将 是 ELNk]. 于 是 


ElAk_1k] =1:p+(1+ Mi)(l—p)=1+(1— pM 
从 而 
Mi = Mii1+1+(1— pM 
也 就 是 
i 下 于 Mk-1 
2 了 


由 于 首次 成 功 的 时 间 Ni 是 参数 为 p 的 几何 随机 变 其 , 可 得 出 
1 


递 推 地 有 


一 般 有 


例 3.16( 快 速 排序 算法 分 析 ) ”假设 我 们 有 m 个 不 同 的 值 z1,… ,zn 的 一 个 集合 ， 

们 要 将 它们 按 递增 的 次 序 排列 , 即 如 通常 所 称 的 , 将 它们 排序 (sort). 完成 它 的 一 个 
有 效 的 程序 是 快速 排序 算法 , 递 推 地 定义 如 下 : 当 n = 2 时 , 该 算法 比较 此 二 值 , 将 
它们 置 于 合适 的 次 序 . 当 n > 2 时 , 它 开始 在 n 个 值 中 随机 地 选取 一 个 , 譬如 zi, 然 
后 将 其 他 的 n 一 1 个 值 与 ri 比较 , 注意 哪些 小 于 ri 哪些 大 于 zi. 以 5; 记 小 于 zi 
的 元 素 的 集合 , 以 5 记 大 于 zi 的 元 素 的 集合 , 该 算法 对 集合 5; 和 5; 分 别 排序 . 所 
以 , 最 后 的 次 序 由 集合 Si 的 元 素 的 次 序 、zi;、 集合 5 的 元 素 的 次 序 排列 组 成 . 例如 ， 
假定 元 素 集合 是 10, 5, 8, 2, 1, 4, 7. 我 们 先 随机 选取 一 个 ( 即 这 7 个 值 中 的 每 一 个 
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被 选取 的 概率 都 是 1/7). 假如 值 4 被 选取 . 然后 我 们 将 其 他 6 个 值 的 每 一 个 与 4 作 


比较 得 到 
{2,1},4,{10,5,8,7} 


现在 我 们 将 集合 {2, 1} 排序 得 到 
1,2,4, {10, 5,8,7} 1 


其 次 , 我 们 在 {10,5,8,7} 中 随机 选取 一 个 , 譬如 取 到 的 是 7, 而 且 将 其 他 三 个 值 与 7 


作 比 较 得 到 
1,2,4,5,7, {10, 8} 


最 后 我 们 将 {10, 8} 排序 , 得 到 
1,2,4,5,7,8,10 
该 算法 有 效 性 的 一 个 基 度 是 作 比 较 的 次 数 的 期 望 . 假定 我 们 以 My 记 n 个 不 同 值 


的 一 个 集合 的 快速 排序 算法 的 比较 次 数 的 期 望 . 为 了 得 到 Ma 的 一 个 递 推 式 , 我 们 
取 条 件 于 初始 的 取 值 , 得 到 


Mn = 》_ El 比 较 次 数 | 取 到 的 是 第 j 小 的 值 | 
i=1 
现在 , 若 初始 的 取 值 是 第 j 小 的 值 , 则 较 小 的 集合 的 容量 是 7 - 1, 较 大 的 集合 的 容 
其 是 nn 一 j. 因此 , 由 于 对 于 选 定 的 初始 的 取 值 需要 作 n 一 1 次 比较 , 我 们 得 到 


n n—l 
Ma = Dn 1+ Mt Mn) =n -1+2 5 Me (因为 Mo =0) 
j=1 k=1 
或 者 , 等 价 地 
nMn =n(n—1)+2D, MK 
k=1 


为 了 求解 上 式 , 注意 到 用 n+ 1 代替 n 我 们 得 到 


n 
(n+ DMari= (n+l)n+2), Mk 
k=1 


因此 , 经 过 相 减 得 到 

(n+1)Mn+i — nMn = 2n+ 2M, 
也 就 是 

(n+1)Mati = (n+2)M, + 2n 
所 以 


Mn+1l _ 2n 攻 Mn 
n+2 (n+l)(n+2) n+1 


将 此 式 迭 代 给 出 
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Mnt1 2n ;2m D) | Mn 
9 n(n+1) n 


-6 万 因为 :M0 


从 而 


n—l 志 尖 
De PD n>1 


利用 恒等式 i/[(i+ 1)(i+2)] =2/(i+2) 一 1/(i+1), 我 们 可 以 对 较 大 的 n 得 到 
如 下 的 近似 : 


2 1 
Mo-ant | 守 二 - 奖 二 | 
i=1 i=l1 
rt 2 和 nt+l 1 
~2(n+2) | :az-| | 
3 了 2 了 


=2(n+2)[2 In(n+2)—In(n+1)+ln2—21n 3 


n+2 


=2n+ 5 [tnt Dd ti 十 In 2 一 2 


~ 2(n+2)ln(n+2) a 


虽然 我 们 通常 用 条 件 期 望 恒等式 很 容易 计算 无 条 件 概率 , 在 下 一 个 例子 中 , 我 
们 将 显示 有 时 怎样 用 它 求 得 条 件 期 望 . 
例 3.17 在 例 2.31 的 有 mn(n > 1) 个 人 的 匹配 问题 中 , 求 给 定 第 一 个 人 没有 匹配 时 
的 匹配 数 的 条 件 期 望 . 
解 以 X 记 匹 配 数 , 如 果 第 一 个 人 有 一 个 匹配 , 令 Xi 等 于 1, 而 在 其 他 情形 令 它 
等 于 0. 那么 

E[X]= E[XIX1 = 0]P{X1 =0} + E[XIX1 =1HP{X = 1} 
=E[X|Xi = qe 十 EIX|X = 2 
但 是 , 由 例 2.31, E[X] = 1. 此 外 , 给 定 第 一 个 人 有 一 个 匹配 时 , 匹配 数 的 期 望 等 于 1 
加 上 当 n 一 1 个 人 在 他 们 自己 的 n 一 1 个 帽子 中 选取 的 匹配 数 的 期 望 数 , 可 得 
EIXIX1 =1] =2 


所 以 , 我 们 得 到 结果 ec 


EIXIX =0] = a 国 
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通过 取 条 件 计 算 方差 
条 件 期 望 也 可 以 用 以 计算 随机 变量 的 方差 . 特别 地 , 我 们 可 以 用 
Var(X) = E[X’] — (E[X])? 
而 后 用 取 条 件 得 到 E[X] 和 E[X3]. 我 们 通过 确定 几何 随机 变量 的 方差 来 阐述 这 个 
力 法 . 
例 3.18( 几 何 随机 变量 的 方差 ) ”连续 地 做 每 次 成 功 的 概率 为 p 的 独立 试验 . N 是 
首次 成 功 时 的 试验 次 数 . 求 Var(N). 
解 ” 如 果 首 次 试验 成 功 记 Y = 1, 否则 记 Y = 0. 
Var(N) = EIN?] — (EIN])? 
为 计算 EIN3] 和 E[N], 我 们 对 Y 取 条 件 . 例如 
EIN’] = PE[EIN2Io]] 
然而 
EIN?lY =1]=1, E[IN?|lY =0)= EIl(1+N)?] 
这 两 个 方程 都 是 对 的 , 因为 如 果 首 次 试验 的 结果 是 成 功 , 那么 显然 W = 1, 从 而 
N? = 1. 另 一 方面 , 如 果 首 次 试验 的 结果 是 失败 , 那么 得 到 第 一 次 成 功 所 需 的 试验 
总 次 数 等 于 1( 首 次 试验 是 失败 ) 加 上 进行 额外 试验 所 需 的 试验 次 数 . 由 于 后 面 的 基 
与 N 同 分 布 , 我 们 得 到 EIN?|Y = 0] = E[(1 + N)?]. 因此 , 我 们 有 
E[IN?]= EIN?|Y = 1]P{Y = 1} + EIN?|Y = 0]P{Y = 0} 
=p+E[(1+N)?](1—p)=1+(1—p)EL2N +N3] 
如 例 3.11 所 示 , 由 于 ELN] = 1/p, 这 就 得 到 


EINY]=1+ 2 D) (1 _p)EINA] 
也 就 是 
EIN3] = 天 
所 以 ee 


Var(N) = BIN -BIN = 2 (1) = 1 m 


另 一 个 用 取 条 件 得 到 随机 变量 的 方差 的 途径 是 用 条 件 方差 公式 . 在 给 定 Y =y 
时 X 的 条 件 方差 定义 为 
Var(XIlY = =E[(X -ELXlY =y)lY = 
也 就 是 , 条 件 方差 正好 与 通常 的 方差 用 相同 的 方式 定义 , 不 同 之 处 是 所 有 的 概率 都 
是 在 条 件 Y = y 下 确定 的 . 将 上 式 右边 展开 , 并 且 逐 项 地 取 期 望 , 就 推出 
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Var(X|Y = 切 =EEX2IY = — (ELXIY =y])? 
以 Var(XIY) 记 这 样 的 函数 , 它 在 Y = y 的 值 是 Var(X|Y = y), 我 们 有 下 面 的 
结果 . 
命题 3.1( 条 件 方差 公式 ) 
Var(X) = E[Var(X|Z)] + Var(E[XIY]) (3.7) 


证 明 
ElVar(XIY)]= [ELX*IY] — (ELXIY))’] 


=B[etx*Iv] ~ [etxIv)] 
= EX3] -BE[(eIxI)] 
而 且 
Var(EIXIYD) = B[(ELxIY)’] ~ (e[EEKI 肖 
=B[(ELXIY)*] -Po 
所 以 
E[Var(xIY)] + Var(E[X|Y]) = E[X?] — (E[X])? 
这 就 完成 了 证 明 . 
例 3.19( 复 合 随 机 变量 的 方差 ) ” 设 X1,X2,… 是 独立 同 分 布 的 随机 变量 , 其 分 布 
为 玉 具有 均值 4 和 方差 o?, 假设 它们 与 取 非 负 整数 值 的 随机 变量 N 独立 . 随机 变 
其 5 = 邢 作 Xi 称 为 复合 随机 变量 , 如 例 3.10 所 示 , 在 那里 确定 了 它 的 期 望 值 . 求 
它 的 方差 . 
解 ” 我 们 可 以 通过 对 N 取 条 件 得 到 ElS?], 然后 利用 条 件 方差 公式 . 首先 


Var(SIN =n)= var (Pxy = 中 
i=] 


= Var S XilN=n)= Var Xi | =no? 
人 
用 同样 的 推理 得 1 
E[SIN=n]=ny 
所 以 
Var(SIN) = No2， E[SIN] = Np 


同时 , 条 件 方差 公式 给 出 
Var(S) = E[No?] + Var(Ny) = o?E[N] +A2Var(N) 


车 入 是 泊 松 随机 变量 , 则 5 = 并 已; Xi 称 为 复合 泊 松 随机 变量 . 因为 泊 松 随机 变 
基 的 方差 等 于 它 的 均值 , 这 就 推出 对 于 一 个 ELN] = 和 的 复合 泊 松 随机 变量 有 
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Var(S) = Mo? + Me2 = AE[X3] 


其 中 X 具有 分 布 F. 国 
例 3.20( 匹 配 轮 数 问题 中 的 方差 ) ”考察 例 3.14 的 匹配 轮 数 问题 , 以 你 = Var(RR) 
记 在 开始 有 n 人 时 所 需 的 轮 数 的 方差 . 利用 条 件 方差 公式 , 我 们 将 证 明 


访 二 2 . 
上 式 的 证 明 利用 对 n 作 归 纳 . 首先 注意 当 = 2 时 所 需 的 轮 数 是 参数 为 p= 1/2 的 
几何 随机 变量 , 所 以 1-p 
= 二 2 


那么 , 假定 归纳 法 假设 
VW=h 2<j<n 


现在 我 们 考察 有 个 人 的 情形 . 如 果 X 是 在 第 一 轮 中 的 匹配 数 , 对 X 取 条 件 , 轮 数 
Rn 按 1 加 上 开始 有 n 一 XX 人 时 所 需 的 轮 数 而 分 布 . 因此 
E[Rn|X] =1 + E[Rn—x] 
=1++n 一 义 。 根据 例 3.14 


再 者 ,由 Vo=0 
Var(Rn|X)= Var(Rn-x) = Vn-x 


因此 , 由 条 件 方差 公式 
Vn =E[Var(Ra|X)] + Var(E[Rn|X]) 
=E[Vn—x] + Var(X) 
= VjP{X =7j} + Var(X) 
j=0 


=VanP{X =0}+ ba Va_jP{X =j} + Var(X) 


#1 
因为 P{X =n 一 1} =0, 由 上 式 及 归纳 法 假设 推出 
你 =VaP{X =0}+ bE —j)P{X=j}+Var(X) 
=VnP{X =0}+ a —P{X =0})—E[X]+ Var(X) 
因为 容易 证 明 (参见 第 2 章 的 例 2.31 和 习题 64)E[X] = Var(X) = 1, 所 以 上 式 给 出 
Wh=VP{X=0}+n(1—P{X=0}) 
这 就 证 明了 结论 . 
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3.5 ”通过 取 条 件 计 算 概率 


我 们 不 仅 可 以 通过 对 合适 的 随机 变量 先 取 条 件 得 到 期 望 , 而 且 也 可 用 此 方法 计 
算 概率 . 为 明白 此 理 , 我 们 以 马 记 一 个 任意 事件 并 且 定义 示 性 随机 变 其 X 为 
和 人 1， 若 已 发 生 
0， 若 已 不 发 生 
由 X 的 定义 推出 
E[X] =P(E) 

EIXIY = 四 =P(EIY =y)， 对 任意 戎 宙 交 量 Y 
所 以 , 由 公式 (3.2a) 与 (3.2b) 我 们 得 到 
P(ElY =WP{Y = 四 ， 若 Y 是 离散 的 

y 


| Per = mrndyw， 着 了 是 连续 的 


例 3.21 ”假定 XX 和 Y 是 独立 的 连续 随机 变 基 , 分别 具 有 密度 fx 和 fy， 计算 
P{X <Y}. 
解 ” 对 Y 取 条 件 得 6 

P{X <Y}= [ P{X <YlY =y}fy(ydy 


P(E) = 


= | P{X <ylY =y}fy(ydy 
[ P{X <y}fy(ydy 


总 三 Fx (fy (ay 


其 中 


l 
， Fx =| adz . 


例 3.22 ”保险 公司 假定 参 保 人 每 年 发 生 事 故 数 是 均值 依赖 于 参 保 人 的 泊 松 随机 变 
基 , 假定 一 个 随机 选取 的 参 保 人 的 泊 松 均值 具有 密度 函数 为 

g(A) = Xe-^， 入 >0 
的 伽 马 分 布 . 问 一 个 随机 选取 的 参 保 人 明年 恰 有 n 次 事故 的 概率 是 多 少 ? 


解 ”以 X 记 一 个 随机 选取 的 参 保 人 明年 发 生 的 事故 数 . 以 Y 记 该 参 保 人 发 生 事故 
数 的 泊 松 均值 , 那么 对 Y 取 条 件 得 出 
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P{X =n}= 上 P{X =nlY = Ajg(A)dA 


= Le 过 页 Xe dA= = 汉 Wie 
o o 


然而 , 因为 2e-2A(2A)"+1 
e 
h(N) = mr 入 >0 1 

是 伽 马 (n+2,2) 随机 变量 的 密度 函数 , 所 以 它 的 积分 为 1. 因此 

2 e.g 2n+2 下 3 

-mh we 
这 表明 i 

P{X = 可 = 2 加 


例 3.23 ”假定 每 天 参加 瑜珈 训练 的 人 是 均值 为 的 泊 松 随机 变 基 , 进而 假定 参加 
人 是 相互 独立 的 , 其 中 是 女性 的 概率 为 p, 是 男性 的 概率 为 1 - P. 求 在 今天 恰 有 
个 女性 和 m 个 男性 参加 的 联合 概率 . 

解 ” 将 今天 参加 的 女性 人 数 记 为 Ni, 男性 人 数 记 为 N2. 以 N = Ni + Na 记 参 加 的 
总 人 数 . 对 N 取 条 件 给 出 


P{N =n,N=m}= DP{N=n,N=mN=i}P{N=} 
er 


因为 当 i 关 nn 十 m 时 P{Ni =n,N2=mlN =} =0, 所 以 由 上 面 的 方程 推出 


P{N =n,N2=m}=P{N=n,N2=mN= nt me 
由 n+m 人 中 的 每 一 个 独立 地 以 概率 p 为 女性 推出 , 在 给 定 n+m 人 参加 时 , 其 中 
女性 n 个 (男性 m 个 ) 的 条 件 概率 正 是 在 n+m 次 试验 中 恰 有 n 次 成 功 的 二 项 概 
率 . 因此 
P{M =n, Ns =m}= 他 到 | p"(1 -De 
nm 
(n+m)! 


-ln +m)! 
nlm! 


ES)) 
nl! ml! 


p"(1 一 p)me-Xpe-A- 可 


因为 上 面 的 联合 概率 质量 函数 分 解 为 两 项 的 乘积 , 其 中 一 项 只 依赖 于 n, 而 另 一 项 
只 依赖 于 m, 这 就 推出 Ni 和 Na 是 独立 的 . 此 外 , 因为 


P{N =n}= yr P{N =n, N2 = m} 


m=0 


一 er- 和 (Xp)” 并 e-A(G- 可 (A(1 -7p))™ 一 er Wp)” 
nl! ml! 
m=0 


nl 
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并 且 , 类 似 地 本 
P{N2 =m} =e-*1-n) = 


我 们 得 到 结论 : Ni 和 Na 是 均值 分 别 为 p 和 和 (1 一 p) 的 独立 泊 松 随机 变量 . 所 以 ， 
这 个 例子 建立 了 一 个 重要 的 结论 : 当 每 一 个 泊 松 随机 事件 独立 地 以 概率 p 被 分 入 
第 一 类 或 者 以 概率 1 一 p 被 分 入 第 二 类 时 , 那么 第 一 类 与 第 二 a 
的 泊 松 随机 变量 . 

例 3.23 的 结果 可 以 推广 到 N 个 具有 均值 和 的 泊 松 随机 事件 被 分 成 
况 , 其 中 分 入 第 i 类 的 概率 是 pi,i = 1,…,k, 学 i_1pi = 1. 车 Ni 是 分 入 第 i 类 的 事 
件数 , 则 NN1,…, Nk 是 独立 的 泊 松 随机 变 其, 均值 分 别 为 Ap1,…, Apk. 这 是 因为 对 
于 n= Dn 

P{N =n Nk =ng} =P{N =n Nk =nk|N =n}P{N = n} 
nl 


mk e 一 入 Nm 
= 一 一 一 : eX\"/n! 
i “Pk / 


大 
=IIe Ap)™ /nl 

i=1 
其 中 第 二 个 等 式 用 到 了 事实 : 总 共 个 事件 , 每 类 的 事件 数 具有 参数 为 (n,p1，… ,pk) 
的 多 项 分 布 . 
例 3.24( 独 立 的 伯 努 利 随 机 变量 和 的 分 布 ) 令 Xi,… ,Xn 是 独立 的 伯 努 利 随机 变 
基 , X; 具有 参数 pi,i = 1 即 P{Xi=1}=pi,P{X =0}= gi=1-pi. 假定 
我 们 要 计算 它们 的 和 Xi 十 … 十 Xn 的 概率 质量 函数 对 此 , 我 们 将 以 递 推 的 方式 得 
到 Xi 十 … 十 Xk 的 概率 质量 函数 , 首先 取 大 = 1, 然后 上 = 2, 并 继续 到 k=n. 开 


始 令 
P(j) =P{XI 二 … 十 Xe 二 四 


并 且 注 意 人 
= Hr P.(0) = le 
对 于 0<j<k, 对 Xk 取 条 件 得 到 如 下 递归 式 
Pi(j)=P{X1+ :+ Xk = jIXk = 1}pk+P{X1 + + Xk = j|Xk = 0}gx 
=P{X1+:"+ Xk-1=j—1X:=1}pe+P{X1+..+ Xk-1 = j|Xk = 0}gx 
=P{Xi1+…+ Xk-i1 =i—1}pk+P{X1+.…+ Xk-1 = j}ge 
三 Br 及 -10 — 1) + grPe-1(7) 


从 忆 (1) = pi, 只 (0) = q 开始 , 从 以 上 的 方程 可 以 递 推 地 求解 得 到 忆 (j), Ps(j) 直 
至 Pn(). a 
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例 3.25( 最 佳 奖 问题 ) ”假设 我 们 可 以 从 一 系列 先后 宣布 的 ”个 不 同 的 奖项 中 选取 
一 个 . 在 一 个 奖项 宣布 后 我 们 必须 立刻 决定 是 接受 还 是 拒绝 转 而 考虑 随后 的 奖项 . 
我 们 只 能 根据 该 奖项 与 前 面 已 经 宣布 的 奖项 的 比较 决定 是 否 接受 它 . 就 是 说 , 例如 ， 
当 第 5 个 奖项 宣布 时 , 我 们 知道 它 与 前 面 已 经 宣布 的 4 个 奖 是 如 何 比较 的 . 假设 拒 
绝 了 一 个 奖 就 失去 了 这 次 机 会 , 我 们 的 目标 是 使 得 到 最 佳 奖 的 概率 达到 极 大 . 假定 
奖项 的 所 有 nl! 个 次 序 都 是 等 可 能 的 , 我 们 该 怎样 做 ? 

解 ” 令 人 惊奇 的 是 , 我 们 可 以 做 得 十 分 好 . 为 了 明白 此 理 , 选 定 一 个 k,0 < kk <n 
同时 考虑 前 个 都 拒绝 并 接受 此 后 第 一 个 比 前 面 个 更 好 的 奖 的 策略 . 将 使 用 此 
策略 选 到 最 佳 奖 的 概率 记 为 Pi( 最 佳 ). 为 了 计算 它 , 对 最 佳 奖项 的 位 置 X 取 条 件 ， 
就 给 出 


及 (最 作 = 六 及 (最 佳 以 一 iDPCX = 工交 及 (最 舍 区 到 
i=1 i=1 


现在 , 如 果 最 佳 奖 在 前 个 奖项 之 中 , 那么 用 所 考虑 的 策略 就 选 不 到 最 佳 奖 . 另 一 
方面 , 如 果 最 佳 奖 在 位 置 i,i > k, 那么 当前 个 的 最 佳 奖 也 是 前 i 一 1 个 的 最 佳 奖 
时 , 我 们 就 可 以 选 到 最 佳 奖 ( 因为 在 位 置 十 1,k 十 2,…,i 一 1 中 的 奖项 将 都 没 被 


选取 ). 因此 ,我 人 有 有。 pp (最 佳 |X 二 避 =0， 荐 i<k 
及 (最 佳 |X =i) =P( 前 i 一 1 个 中 的 最 佳 在 前 个 之 中 ) =k/(i 一 1), 若 i > 
从 上 式 我 们 得 到 
n nl a 
及 (最 作 = 和 ~ 上 | laz= tln (SS ) = 知 (#) 
现在 , 如 果 我 们 考虑 函数 
那么 


所 以 
g(2)=0= n(n/z)=1=*7=n/e 

这 样 , 因为 Pi( 最 佳 ) < g(k), 我 们 看 到 所 考虑 的 这 类 策略 中 的 最 佳 策略 , 就 是 放弃 
前 面 的 n/e 个 奖项 , 然后 接受 第 一 个 比 这 些 都 好 的 一 个 奖 . 另外 , 因为 g(n/e) = l/e， 
这 个 策略 选取 到 最 佳 奖 的 概率 近似 地 为 1/e ~ 0.367 88. 

注 多数 学生 对 得 到 最 佳 奖 的 概率 的 大 小 会 很 惊讶 , 他 们 以 为 当 n 大 时 这 个 概率 
接近 于 0. 然而 , 即使 不 通过 计算 , 稍 加 思考 就 可 想到 , 得 到 最 佳 奖 的 概率 可 以 达到 
适当 地 大 . 我 们 考虑 放弃 前 一 半 奖项 并 接受 第 一 个 比 这些 奖 项 都 好 的 一 个 策略 . 实 
际 选 定 奖项 的 概率 是 全 面 的 最 佳 奖 在 后 一 半 之 中 的 概率 , 其 值 为 1/2. 此 外 , 在 选 定 
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奖项 时 , 到 选取 时 这 个 奖项 将 是 已 出 现 的 多 于 n/2 个 奖项 中 最 好 的 一 个 , 并 是 最 佳 
奖 的 概率 至 少 为 1/2. 因此 , 放弃 前 面 一 半 的 奖项 , 然后 接受 第 一 个 比 这些 都 好 的 一 
个 奖 的 策略 , 导致 得 到 最 佳 奖项 的 概率 大 于 1/4. 国 
例 3.26 nn 个 人 在 聚会 上 摘 下 他 们 的 帽子 . 帽子 混合 在 一 起 后 , 每 人 随机 地 取 一 个 . 
如 果 一 个 人 选取 到 他 自己 的 帽子 , 我 们 就 说 发 生 了 一 次 匹配 , 那么 , 没有 匹配 的 概率 
是 多 少 ? 恰巧 有 大 次 匹配 的 概率 是 多 少 ? 
解 ” 令 万 为 无 匹配 这 个 事件 , 而 为 了 表达 清楚 对 n 的 依赖 性 , 记 已 = P(E). 我 们 
先 对 第 一 个 人 是 否 取 到 自己 的 帽子 取 条 件 , 记 这 些 事件 为 M 和 M°. 那么 

P, =P(E) =P(EIM)P(M) + P(EIM°)P(M°) 
显然 , P(EIM) =0, 于 是 a 
P=P(EIM) (3.8) 
现在 , P(E|M°) 是 n 一 1 个 人 从 不 含 他 们 中 某 一 个 人 的 帽子 的 n 一 1 个 帽子 的 集合 
中 各 取 一 个 时 无 匹配 的 概率 . 这 可 能 以 两 种 互 不 相 容 的 方式 发 生 . 或 者 无 匹配 , 并 
且 额 外 的 一 人 ( 指 被 第 一 个 人 取 走 帽子 的 那个 人 ) 并 没有 取 到 额外 的 帽子 (这 是 第 
一 个 选取 的 人 的 帽子 ); 或 者 无 匹配 , 并 且 额 外 的 一 人 取 到 额外 的 帽子 . 这 两 个 事件 
中 第 一 个 的 概率 正 是 P_1, 这 时 将 这 个 额外 的 帽子 看 成 属于 这 个 额外 的 人 . 因为 第 
二 个 事件 有 概率 Pa_2/(n 一 1), 我 们 有 

P(EIM°)= 已 ;十 oP- 


于 是 由 方程 (3.8)， i ¥ 
P= 二 及 -1 二 元 甩 -2 
或 者 等 价 地 ， 1 
P—P-1= -a(Pr-1— Pa-2) (3.9) 
此 外 , 因为 Ps 是 n 个 人 在 他 们 自己 的 帽子 中 选取 时 无 匹配 的 概率 , 我 们 有 
P=0, P= 3 
所 以 由 方程 (3.9)， 
BB=--2 = 即 B= 下 -总 
以- 广 =- 久 了 F 全 = 六 即 忆 = 六 一 训 + 
一 般 地 , 我 们 有 i Ce 
oh 


为 了 得 到 恰 有 大 个 匹配 的 概率 , 我 们 考察 任意 固定 的 一 群 k 个 人 . 只 有 他 们 取 
到 自己 的 帽子 的 概率 是 
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1 1 1 _ A)! 
i nl Pn 


其 中 忆 4 是 其 余 的 n 一 上 个 人 在 他 们 自己 的 幅 子 中 选取 时 无 F 配 的 条 件 概率 . 因 
为 个 人 的 集合 有 人】 种 取 法 ,所 求 的 丛 有 上 个 匹配 的 概率 是 


人 


3 (1)"™-* 
Br_ A Ht +m 
-mi k! 
对 于 大 的 n, 它 近似 地 等 于 eV/ 人 
注 递 推 方程 (3.9) 也 可 以 用 循环 的 概念 得 到 , 我 们 说 不 同 的 人 ia,i，……, 钦 构成 
一 个 循环 , 如 果 谎 取 到 iz 的 帽子 , iz 取 到 is 的 帽子 ,……… ,让 -1 取 到 认 的 帽子 ,让 
取 到 记 的 帽子 . 注意 每 个 人 是 循环 中 的 一 部 分 , 而 且 在 某 人 取 到 他 自己 的 帽子 时 特 
环 的 容量 为 从 = 1. 如 前 , 忆 为 无 匹配 发 生 的 事件 , 对 含 一 个 特定 的 人 的 循环 的 长 度 
取 条 件 , 其 中 记 此 人 为 “ 甲 ”, 推出 


P,=P(E)= Ptslc =k)P(C =k) (3.10) 
k=1 


此 处 C 是 包含 “ 甲 ”的 循环 的 长 度 . 我 们 将 “ 甲 ” 称 为 第 一 个 人 , 并 且 注 意 , 如 果 第 
一 个 人 没有 选 到 他 的 帽子 , 且 帽 子 被 第 一 个 人 选 到 的 人 称 为 第 二 个 人 , 但 他 并 没有 
选 到 第 一 个 人 的 帽子 ; 帽子 被 第 二 个 人 选 到 的 人 称 为 第 三 个 人 , 他 也 没有 选 到 第 一 
个 人 的 帽子 ;……., 帽子 被 第 大 一 1 个 人 选 到 的 人 , 他 所 选 到 的 帽子 恰 是 第 一 个 人 的 
帽子 . 那么 C = 大 . 因此 


P(C = 月 = 


n-ln—2 n—k+1l 1 1 
n n-l nkt+t2n—kil n Gn 


这 就 是 说 , 含有 特定 人 的 循环 的 长 度 等 可 能 是 1,2,…,n 中 的 任意 一 个 . 此 外 , 由 于 
C= 1 意味 着 第 一 个 人 选 到 他 的 帽子 , 就 推出 


P(EIC=1)=0 (3.12) 
另 一 方面 , 如 果 C = 上, 那么 在 这 次 循环 中 的 上 个 人 选 到 的 帽子 的 集合 恰 是 这 些 人 


的 帽子 的 集合 . 因此 , 条 件 取 于 C = 大 上 , 问题 就 简化 为 确定 当 n 一 上 个 人 在 他 们 的 
n 一 上 个 帽子 中 随机 选取 时 没有 匹配 的 概率 . 所 以 , 对 于 大 > 1， 


P(EIC=k)=Pk (3.12a) 
将 (3.11)、(3.12) 和 (3.12a) 代入 方程 (3.10), 就 给 出 


二 
及 一 元 2 及 (3.13) 
k=2 
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容易 证 明 它 等 价 于 方程 (3.9). 
例 3.27( 选 票 问题 ) ”在 一 次 选举 中 , 候选 人 A 得 到 了 n 张 选票 , 候选 人 B 得 到 了 
m 张 选 票 , 其 中 n > m. 假设 所 有 不 同 的 次 序 都 是 等 可 能 的 , 证 明 在 计算 选票 时 A 
总 是 领先 的 概率 为 (n 一 m)/(n 十 mm). 

解 ” 令 Pam 记 所 求 的 概率 . 取 条 件 于 得 到 最 后 一 张 选 票 的 候选 人 , 我 们 得 到 


Pam =P{A 总 是 领先 |A 得 到 最 后 一 张 选票 } 一 


ni+m 


+P{A 总 是 领先 |B 得 到 最 后 一 张 选票 } 


而 在 给 定 A 得 到 最 后 一 张 选票 的 条 件 下 , 我 们 能 够 看 到 A 总 是 领先 的 概率 正如 A 
得 到 了 n 一 1 张 选票 , B 得 到 了 m 张 选票 的 情形 一 样 . 因为 当 给 定 B 得 到 最 后 一 张 
选票 时 , 类 似 的 结果 也 是 正确 的 , 我 们 从 上 面 看 到 


n 
Pnm= 


m 
二 南 甩 -lm + Pm-! (3.14) 


现在 我 们 可 以 对 n+ m 用 归纳 法 证 明 Pam = (n 一 m)/(n 十 m). 它 在 n+m=1 时 
是 正确 的 , 即 Po = 1. 假设 在 n+m = 大 时 它 也 正确 , 那么 在 nm = 上 十 1 时, 由 
方程 (3.14) 及 归纳 法 假设 , 我 们 有 
Bs n nl1—m m n-mt+l _n-m 

对 n+t+mn-l+m m+nnti+m-l n+m 
从 而 证 明了 结论 . 国 

选票 问题 有 一 些 有 趣 的 应 用 . 例如 , 考虑 连续 地 抛掷 一 枚 出 现 正面 的 概率 总 是 
2 的 硬币 , 我 们 确定 在 抛掷 开 始 后 首次 出 现 正面 总 数 与 反面 总 数 相等 时 抛掷 次 数 的 
概率 分 布 ， 首次 相等 在 第 2n 次 抛掷 发 生 这 个 事件 的 概率 可 以 由 先 对 前 2n 次 试验 
中 正面 出 现 的 总 数 取 条 件 得 到 . 这 就 得 到 


P{ 首 次 出 现 相等 时 的 次 数 = 2n} 
=P{ 首 次 出 现 相等 时 的 次 数 = 2n| 在 前 2n 次 中 有 n 次 是 正面 } ra -p)". 
现在 给 定 前 2n 次 抛掷 中 有 ?m 次 是 正面 时 , 我 们 可 以 看 到 出 现 n 次 是 正面 和 n 次 是 
反面 的 所 有 不 同 次 序 都 是 等 可 能 的 , 因此 上 面 的 条 件 概率 等 价 于: 在 一 次 选举 中 每 
个 候选 人 得 到 n 张 选票 , 在 计数 到 最 后 一 张 选 票 时 (此 时 他 们 得 票 相同 ), 其 中 一 个 
候选 人 总 是 领先 的 概率 . 但 是 , 对 无 论 是 谁 得 到 最 后 一 张 选 票 取 条 件 , 我 们 可 以 看 到 
这 正 是 选票 问题 中 m = n 一 1 时 的 概率 . 因此 


P{ 首 次 出 现 相等 时 的 次 数 =2n} =Pn1 (2 )w"(1 一 p)" 


ss 所 NN on 
-Cr (一 可 
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候 定 现在 我 们 要 确定 在 2n + ; 次 抛 据 后 首次 出 现 正面 总 数 比 反面 总 数 多 i 次 
的 概率 . 为 了 出 现 这 种 情况 , 以 下 的 两 个 事件 必须 发 生 ， 

人 @ 前 2n+i 次 擅 近 的 结果 是 n+: 次 正面 ,n 次 反面 

(b) n+ 次 正面 与 次 反面 的 出 现 次 序 , 是 使 直到 最 后 的 扫 搓 为止, 正面 的 次 
数 绝 不 比 反面 次 数 多 i 次 的 情形 . 
现在 容易 看 到 事件 (b) 发 生 当 且 仅 当 n+i 次 正面 与 次 反面 的 出 现 次 序 是 从 最 后 
一 次 扫 拓 由 改 , 反 向 进行 时 正面 总 是 领先 的 情形 . 例如 , 如 果 有 4 个 正面 和 2 个 反面 
和 @@= 21= 2) 那么 结果 -___ TH 并 不 满足, 因为 这 会 在 第 6 次 抽 拉 前 使 正面 比 反 
面 多 2 次 (因为 前 4 次 的 结果 是 正面 比 反面 多 2 次) 

现在 , 在 (a) 中 指定 的 事件 的 概率 正 是 抛掷 2n +i 次 硬币 得 到 n +i 次 正面 与 
n 次 反面 的 二 项 概率 

我 们 现在 来 确定 在 给 定 抛掷 2n + 次 硬币 得 到 n +i 次 正面 与 ”次 反面 时 
(b) 中 指定 的 事件 的 条 件 概 率 . 为 此 首先 注意 , 在 给 定 殷 据 2n +; 次 硬币 得 到 总 数 为 
n+ 次 正面 与 ”次 反面 时 , 抛 拉 的 所 有 可 能 的 次 序 都 是 等 可 能 的 . 结果 是 , 在 给 定 
人 @Q) 时 人) 的 条 件 概率 正 是 在 n+ ;次 正面 与 ”次 反面 的 一 个 随机 排序 中 , 当 从 相 
反 的 次 序 计数 时 , 正面 总 比 反面 多 的 概率 . 由 于 所 有 相反 的 排序 都 是 等 可 能 的 , 这 就 
由 选票 问题 推出 此 条 件 概率 是 i/(2n + 

这 样 我 们 就 证 明了 

Pt = (pra nD)", Plo)} =i 


i 


于 是 
P{ 在 抛掷 2n + 次 时 , 正面 首次 领先 i 次 } = (ee za -本 


例 3.28 ” 设 证 ,U2,… 是 一 列 独立 的 (0,1) 均匀 随机 变量 , 令 

N=min{n22:Un >Un}, M=min{n>1:0+.…+Un > 1} 
就 是 说 , N 是 第 一 个 大 于 其 前 一 个 的 均匀 随机 变量 的 指标 , 而 M 是 我 们 需要 的 和 
超过 1 的 均匀 随机 变量 的 个 数 . 令 人 惊奇 的 是 N 与 M 有 相同 的 概率 分 布 , 而 且 他 
们 的 共同 均值 是 el 
解 ” 容 易 求 得 N 的 分 布 . 由 于 U1,U2,… 的 所 有 nl! 种 次 序 都 是 等 可 能 的 , 我 们 有 


P{N>n}=P{Ui > U2 >:…… > Un} = 1/n! 


为 了 证 明 P{M > nn} = 1/n!, 我 们 用 数学 归纳 法 . 然而 , 作为 归纳 法 假设 , 我 们 证 明 
更 强 的 结论 , 即 对 0 < z < 1,P{M(z) >n} =z"/nl,n>1, 其 中 


MI(z)=min{n2>1:U1+-.…+Un > 7} 
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是 和 超过 z 的 均匀 随机 变 其 的 最 少 个 数 . 为 了 证 明 P{M(z) > n} = z"/nl, 首先 注 
意 到 它 对 = 1 是 正确 的 , 这 是 因为 

P{M(z) >1=P{U<zl=z 
因此 我 们 假设 对 于 所 有 的 0 < z < 1, P{M(z) > n} = z"/n!. 为 了 确定 P{M(z) > 
nn 十 1}, 取 条 件 于 上 得 到 


P{M(z) >n+1}= ft) >n+10 =y}dy 
0 
= P{M(z) > n+1l0 =y}dy 
0 


P{M(z—y) >n}dy 


< 
= 人 到 和 入 ay。 用 归 纳 法 公设 


其 中 上 面 的 第 三 个 等 式 来 自 以 下 事实 : 给 定 太 = y, M(z) 与 1 加 上 总 和 超过 
z 一 4 的 均匀 随机 变 基 的 个 数 有 相同 的 分 布 ， 于 是 归纳 法 完成 , 我 们 就 证 明了 对 
0<zxsln>1, 有 
P{AM(z) > n} = z"/n! 
令 z=1 就 证 明了 NN 与 M 有 相同 的 概率 分 布 . 最 后 , 我 们 有 
EIM] = EIN] = DP- De 
n=0 
例 3.29 设 Xi,X2,… 是 有 相同 分 布 函数 已 及 密度 函数 f = F"' 的 独立 连续 随机 
变 基 , 并 且 假 设 它们 逐个 地 依次 被 观测 . 设 
N = min{n > 2: Xn 是 X1,…,Xn 中 第 二 大 的 } 
和 
M = min{n > 2: X 是 Xi,Xn 中 第 二 小 的 } 
哪 一 个 随机 变量 更 大 , 是 观测 值 中 第 二 大 的 首 个 随机 变量 Xn, 还 是 观测 值 中 第 二 
小 的 首 个 随机 变量 XMr? 
解 ” 为 了 计算 Xn 的 概率 密度 函数 , 自然 地 取 条 件 于 N 的 取 值 . 所 以 , 我 们 从 确定 
它 的 概率 质量 函数 入 手 . 现在 , 如 果 我 们 令 


Ai = {Xi 关 XX,…Xi 中 第 二 大 的 }，i>2 


而 且 令 
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那么 , 对 于 > 2， 

P{N =n} =P(A2A3.… 4 145). 
由 Xi 独立 同 分 布 推出 , 对 于 任意 m > 1, 知道 随机 变量 X1,… ,Xm 的 大 小 次 序 并 
没有 给 出 有 关 m 个 值 的 随机 变量 集合 {Xi,…, Xm} 的 信息 . 就 是 说 , 例如 , 知道 
Xi < Xo 并 没有 给 出 有 关 min(X1,X2) 或 max(X1, X2) 的 值 的 信息 . 由 此 推出 事件 
Ai(i > 2) 是 独立 的 . 此 外 , 由 Xi 等 可 能 地 是 X1,… ,Xi 中 最 大 , 或 是 第 二 大 , ……… Y 
或 是 第 i 个 大 , 就 推出 PL4i) = (i 一 1)/i,i> 2. 所 以 , 我 们 有 

123 n-21 L 


PIN=n} -384 ni n™ mm- 


因此 , 取 条 件 于 N 就 推出 Xn 的 概率 密度 函数 是 
fxn(7)= 3 Df eln) 


现在 由 于 随机 变 基 Xi,… ,Xn 的 次 序 独立 于 {Xi,…, Xn} 的 值 的 集合 , 这 就 推出 
事件 {N = n} 独立 于 {Xi,…, Xn}， 由 此 得 到 , 在 给 定 N = n 时 , Xn 的 条 件 分 
布 等 于 具有 分 布 函数 已 的 n 个 随机 变 基 的 集合 中 的 第 二 大 者 的 分 布 因此 , 用 例 
2.38 中 关于 这 种 随机 变 二 的 密度 函数 的 结论 , 我 们 得 到 


Jxv(z)= 过 ie 0) 0 -Fe) 


= f(z)(1 — F(z)) T(r)y 
pe 
= f(z) 


令 人 惊奇 的 是 Xw 与 Xi 有 相同 的 分 布 F. 而 且 , 如 果 我 们 现在 取 Wi = 一 Xi,i > 1， 
那么 Ww 是 已 经 看 到 的 第 二 大 观测 值 的 第 一 个 Wi 的 值 . 因此 , 从 上 面 就 得 到 Ww 
与 Wi 有 相同 的 分 布 . 即 -Xm 与 -Xi 有 相同 的 分 布 , 所 以 Xm 也 有 分 布 F! 换 句 
话说 , 不 论 我 们 停止 在 已 经 出 现 的 那些 观测 值 中 的 第 二 大 的 首 个 随机 变 基 , 还 是 停 
止 在 已 经 出 现 的 那些 观测 值 中 的 第 二 小 的 首 个 随机 变量 , 我 们 都 会 在 得 到 一 个 有 分 
布下 的 随机 变 基 后 结束 . 

然而 上 面 的 结论 十 分 惊人 , 这 是 一 个 称 为 伊 格 纳 托 夫 定 理 (Ignatov's theorem) 
的 一 般 的 结果 的 特殊 情形 , 由 它 能 推出 更 多 的 惊喜 . 例如 , 对 上 > 1, 令 


Nk = min{n > 上: Xn = X1,… ,Xn 中 第 上 大 } 


所 以 , Ns 是 我 们 在 前 面 记 为 N 的 那个 , 而 Xx 是 在 到 此 为 止 已 经 出 现 的 那些 观测 
值 中 的 第 上 大 的 首 个 随机 变 基 , 由 上 面 用 的 同样 的 方法 可 以 证 明 对 于 所 有 k, Xn， 
有 分 布 函数 下 (参见 本 章 的 习题 82). 另外 , 可 以 证 明 对 于 任意 上 > 1, 随机 变量 XN， 
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是 独立 的 . (在 离散 随机 变量 情形 的 伊 格 纳 托 夫 定理 的 叙述 与 证 明 将 在 3.6.6 节 中 
给 出 .) mn 
例 3.30 一 个 总 体 由 m 个 家 庭 组 成 . 以 Xj; 记 家 庭 7 中 的 人 数 , 而 且 假定 X1，…, Xm 
是 独立 的 随机 变量 , 并 且 具 有 均值 为 上 = kpx 的 相同 的 概率 质量 函数 


pk=P{X;=Kk}, Dpr=1 
k=1 
假定 总 体 的 一 个 成 员 @ 被 随机 地 选取 , 即 总 体 中 的 成 员 在 被 选取 时 是 等 可 能 的 , 并 
且 以 5; 记 选 取 到 的 个 体 来 自 人 数 为 i 的 家 庭 这 一 事件 . 我 们 断言 
当下 一 oo 时 P(5D) 一 名 
及 


解 ”上 述 公式 的 直观 推导 是 , 因为 每 个 家 庭 的 人 数 为 i 的 概率 是 Pi, 由 此 推出 当 m 
很 大 时 近似 地 有 mp; 个 家 庭 的 人 数 为 i. 于 是 , 总 体 中 有 impi 个 成 员 来 自 人 数 为 i 的 


家 庭 , 由 此 推出 选取 到 的 个 体 来 自 人 数 为 ;的 家 庭 的 概率 近似 地 是 = 于 


作为 一 个 更 正式 的 推导 , 让 我 们 以 Ni 记 人 数 为 i 的 家 庭 数 目 . 也 就 是 
三 集合 {k :上 = 1,…,m: Xk 一 庄 的 元 素 个 数 
那么 , 对 于 处 = (Xi，…Xm) 取 条 件 , 我 们 得 到 


iNi 
P(Si|X) = pr 和 
= 


因此 
P(Si =E[P(S; |X)] 


iNi/m | 
-| 1 Xk/m 

因为 每 个 家 庭 独 立地 以 概率 Pi 具有 人 数 i, 由 此 用 强大 数 定律 推出 , 当 m 一 co 时 ， 

人 数 为 i 的 家 庭 的 比率 Ni/m 将 收敛 到 pi。 还 是 由 强大 数 定律 , 当 m 一 co 时 ， 

1 Xk/m 一 E[X] = 人 因此 , 以 概率 1 有 


iNi/m ipi 
0 D1 Xk/m 


收敛 到 鱼 ， 同样 它 的 期 望 也 收敛 到 wi 这 就 证 明了 结论 . 


因为 随机 变量 二 


@ 指 任 一 个 家 庭 中 的 成 员 , 即 个 体 . 一 一 译 者 注 
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(然而 , 现在 总 将 它 归 入 limm- = Ym = c 蕴涵 limm-,oo E[Ym] = e 的 情形 , 这 个 蕴涵 


关系 在 Ym 是 有 界 随机 变量 时 是 正确 的 , 而 这 里 所 有 的 随机 变量 i 都 在 0 
k=1 


和 1 之 间 .) 四 
利用 取 条 件 也 可 得 到 比 直接 计算 更 为 有 效 的 解 . 这 由 我 们 下 一 个 例子 开明 . 

例 3.31 ”考虑 个 独立 的 试验 , 其 中 每 个 试验 的 结果 是 分 别 具 有 概率 p1,… ,pk 的 

结果 1 之 一 , 并 Lpi = 1. 进一步 假定 n > k, 而 我 们 关心 的 是 确定 每 个 结果 

至 少 出 现 一 次 的 概率 . 如 果 我 们 以 4i 记 在 n 次 试验 的 任意 一 次 中 结果 i 都 没有 发 

生 这 个 事件 , 那么 我 们 要 求 的 概率 就 是 1 一 P(U*_， 4i), 它 可 以 用 容 斥 定理 得 到 : 


大 
P (v 4) = DP(4:) -YD P(AiA;) 
Es i=l 


i ji 


+ 多》 DP(AiAAR) — -+ (-1)*+P(A1... Ak) 


i j>ik>j 


其 中 
P(A4i) =(1 —pi)" 


P(AiA;)=(1—pi—pi)", i<j 
P(AiAjAk) =(1—pi—pi—pk)", i<j<k 

上 面 求解 的 困难 在 于 计算 它 需 要 算 2* - 1 项 , 其 中 每 项 是 一 个 高 至 宕 nn 的 基 . 因而 
当 上 大大 时 , 上 述 解 是 计算 上 非 有 效 的 . 让 我 们 看 如 何 利用 取 条 件 来 得 到 一 个 有 效 解 . 

首先 注意 , 如 果 我 们 取 条 件 于 Ni (结果 出 现时 的 次 数 ), 那么 当 Nk > 0 时 ， 
结果 的 条 件 概 率 将 等 于 , 做 一 Ni 次 试验 , 所 有 结果 1,…,k 一 1 至 少 发 生 一 次 的 
概率 , 在 每 次 试验 中 结果 i 发生 的 概率 为 pi/(p1 +… 十 Pk-1),i 二 1,…,k 一 1. 然后 
我 们 可 以 对 这 些 项 使 用 相似 的 取 条 件 的 步 又 . 

按照 上 面 的 想法 , 对 于 m < n,r < , 在 做 m 次 独立 的 试验 时 , 将 结果 1,… ,7 
中 的 每 一 个 至 少 发 生 一 次 这 个 事件 记 为 4w,, 其 中 每 次 试验 的 结果 是 1,…,7 之 
一 , 分 别 以 概率 pi1/P.,…, 已 /有 出 现 , P. = ;1Pj. 令 P(mr) = P(Am,r), 注意 
P(m, 上) 就 是 所 求 的 概率 . 为 了 得 到 P(m,r) 的 表达 式 , 取 条 件 于 结果 r 发 生 的 次 数 . 


这 给 出 
Pi- 叶 Porh 和 和 次 |(”) (如) 1- 对) 
从 


en {> 
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开始 ， 我 们 可 以 利用 上 而 的 拉 撕 关系 和 到 P(m,2),m=2,.…,n— (k— 3 然后 得 
到 其 P(m,3),m = 3,…,n 一 (k 一 3), 依 此 类 推 , 直到 P(m,k 一 1),m = 上 一 1,…,n 一 1. 
这 时 候 我 们 可 以 利用 此 训 推 关系 计算 P(n,k). 不 难 验证 所 需 的 计算 量 是 大 的 
式 , 在 上 大 时 , 这 要 比 2* 小 得 多 . 
例 3.32( 发 球 和 对 打 比 赛 ) 考虑 由 选手 4 和 选手 B 参加 的 发 球 和 对 打 比 赛 . 和 
4 发 球 的 每 一 局 , 选手 4 赢 的 概率 为 pa, 而 选手 B 赢 的 概率 为 gs = 1 一 po. 而 假定 
B 发 球 的 每 一 局 , 选手 4 赢 的 概率 为 mw, 而 选手 B 赢 的 概率 为 % = 1 ps. 假设 每 
局 赢 者 获得 1 个 点 , 且 成 为 下 一 局 发 球 人 . 比赛 胜 负 由 4 总 共 先 获得 N 个 点 , 或 者 
B 总 共 先 获得 M 个 点 决定 . 在 已 知 4 先 发 时 , 我 们 想 要 求 最 终 分 数 的 概率 . 

这 个 例子 的 形式 可 用 于 各 种 发 球 和 对 打 游 戏 , 包括 国际 排球 比赛 和 美洲 壁球 比 
赛 , 两 者 都 从 原先 的 形式 转变 为 给 上 一 局 对 打 的 赢 者 发 球 权 , 但 是 只 在 对 打 的 赢 者 
是 发 球 人 时 奖励 一 个 点 . (对 后 一 种 形式 的 分 析 , 参见 习题 84.) 

令 下 为 最 终 的 记分 , 下 = (i,j) 意味 着 4 获得 总 共 i 个 点 , 而 B 获得 总 共 了 个 
点 . 显然 

P{F=(N,0)} =pS, P{F=(0,M)}= gq!. 


为 了 确定 其 他 最 终 分 数 的 概率 , 我 们 设想 4 和 B 的 游戏 即使 在 比赛 输赢 已 经 决定 
时 还 继续 进行 . 定义 一 个 概念 “ 轮 ” 如 下 , 4 首次 发 球 是 第 一 轮 的 开始 , 而 4 每 次 发 
球 是 新 一 轮 的 开始 . 第 i 轮 中 B 赢得 的 点 数 记 为 Bi. 注意 , 若 4 在 一 轮 中 赢得 首 
个 点 , 则 在 此 轮 中 B 赢得 0 点 . 另 一 方面 , 若 B 在 一 轮 中 赢得 首 个 点 , 则 B 将 继续 
发 球 直至 4 赢 一 个 点 为 止 , 这 说 明了 B 在 一 轮 中 赢得 的 点 数 等 于 在 这 轮 中 B 的 发 
球 次 数 . 因为 在 4 赢 一 个 点 之 前 B 连续 发 球 的 次 数 是 参数 为 ps 的 几何 随机 变量 ， 
我 们 有 


| A 以 概率 pa 
" 几何 (pp)， 以 概率 gq。 


这 就 是 
P{Bi=0}= pa 
1  P{B:=k|B:>0}=gt!ps,k>0 


因为 每 次 在 4 赢得 一 点 时 , 就 开始 了 新 的 一 轮 , 由 此 推出 Bi 是 在 4 有 i-1 点 直 
至 有 i 点 的 期 间 B 赢得 的 点 数 . 因此 , B(n) = 沁 ;-1 Bi 是 在 4 赢得 第 个 点 的 时 
刻 B 赢得 的 点 数 . 注意 , 若 B(N) = m, 则 最 终 分 数 将 是 (N,m),m < M. 对 m > 0， 
我 们 要 确定 P{B(n) = m}. 为 此 , 我 们 对 B1,…, B， 中 的 正 值 的 个 数 取 条 件 . 将 此 
正 值 的 个 数 记 为 Y, 也 就 是 


Y =i<n 中 Bi > 0 的 个 数 
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我 们 得 到 人 
P{B(n)=m} =》 P{B(n) =mlY =7}P{Y =7} 
r=0 
=D_P{B(n)=mlY =r}P{Y =7} 
r=1 
其 中 后 一 个 等 式 来 自 , 由 于 m > 0, 所 以 P{B(n) = mlY = 0} =b. 因为 B1,…, Bn 
是 独立 的 , 且 每 个 取 正 值 的 概率 为 g,, 由 此 推出 它们 都 取 正 值 的 个 数 Y 是 参数 为 
(mga) 的 二 项 随机 变量 . 因此 


P{B(W) =m} = 六 PUB =mly =7} ("gn 
r=1 


现在 , 若 变量 B1,…, Bn 中 正 值 的 个 数 为 7, 则 B(n) 是 7 个 参数 为 ps 的 独立 
几何 随机 变量 之 和 , 它 是 当 每 次 试验 以 概率 po 成 功 时 , 直至 有 次 成 功 的 试验 次 数 
的 负 二 项 分 布 . 因此 


P{B(n) =mlY =7} = (aa 


其 中 由 约定 可 知 : 若 5 > a 则 ) = 0. 可 推导 出 


P{B(n) =m} = 7 (war (0) gp 
0 各 ) 


于 是 , 我 们 证 明了 
P{F =(N,m)} = P{B(N) =m} 


my (m1) /NY (pa )” 
-om (rr) (Me), ， 0<m<x 
为 了 确定 最 终 记分 为 (n, M)(0 < n < 入 ) 的 概率 , 我 们 对 在 4 赢得 第 nn 个 点 的 
时 刻 B 已 赢 的 次 数 取 条 件 , 得 到 


P{F=(n,M)} = P{F = (n, M)|B(n) = m}P{B(n) =m} 
m=0 


M—1 
=》 P{F = (n,M)|B(n) = m}P{B(n) = m} 
m=0 
现在 , 给 定 在 4 赢得 第 n 个 点 的 时 刻 B 赢得 m(< M) 点 时 , 要 想 最 终 记 
分 是 (n, M), B 必须 赢得 4 发 球 的 下 一 个 点 , 而 且 以 后 必须 赢得 他 发 球 的 最 终 的 
M 一 m 一 1 个 点 . 因此 , P{F = (n, M)|B(n) = m} = gogM-™!, 由 此 推出 


108 第 3 章 条 件 概率 与 条 件 期 望 


M-1 
P{F = (n, M)} = 2 gag&-m-IP{B(n) = m} 
Li M—1 
=qagf pn 十 汪 gag ™ 1P{B(n) = m} 


=gagt -1pn Fr) ) | ,0<n<N 


m=1 r=1 


如 前 所 述 , 给 定 Y =y 的 条 件 期 望 恰 与 普通 的 期 望 一 样 , 除了 所 有 的 概率 是 取 
条 件 在 事件 Y =y 上 以 外 . 因此 , 条 件 期 望 满 足 普通 期 望 的 所 有 的 性 质 . 例如 ， 


DjE[XIW = wjP{W =w}， 若 W 是 离散 的 
E[X] by 
| E[XIW =wjfw(w)dw， ”车 W 是 连续 的 


的 对 应 关系 是 
Dj EIXIW =w,Y =yP{W =wlY = 让 ， 若 W 是 离散 的 
EIXIY = 


| BXIw = wy =yjfwr(wlyjaw， 车 WW 是 连续 的 


如 果 E[XIY,W] 定义 为 Y 和 W 的 函数 , 使 得 当 Y = y 和 W = w 时 , 它 等 于 
E[XIY =y,W = yj, 那么 上 面 的 关系 可 以 写成 


EIXIY] = E[elxly, wilY] 


例 3.33 ”汽车 保险 公司 将 每 个 参 保 户 分 为 i = 1,…, 上 种 类 型 . 假定 类 型 i 的 参 保 
户 在 相继 的 年 份 中 的 事故 次 数 是 均值 为 Xi 的 独立 泊 松 分 布 , i = 1,…,k， 一 个 新 
的 参 保 户 属于 类 型 i 的 概率 是 pi, Dt_1 Pi = 1. 已 知 一 个 参 保 户 在 第 一 年 中 有 nn 次 
事故 , 问 在 她 的 第 二 年 平均 有 多 少 事故 ? 在 她 的 第 二 年 有 m 次 事故 的 条 件 概 率 是 
多 少 ? 1 

解 ” 以 Ni 记 参 保 户 在 第 i 年 的 事故 次 数 , i = 1,2. 取 条 件 于 她 的 风险 类 型 7 以 得 
到 E[N2|Ni = 可 


大 
E[Nz|Ni = 可 = 》 ENzIT =j, MN = 可 PIT=jlVi =n} 


j=1 


大 
= DEINIT = jlP{T =jIN =n} 
j=1 
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大 
= DNP{T=jIN =n} 


j=1 
_ Die MMtipy 
er 
其 中 最 后 的 等 式 用 了 
P{T=j,N =n} 
P{N = n} 
-PP{M=nlT=j}P{T=) 
DaP{N =n|T =j}P{T=7)} 
Pje™”™ /nl 
Dicipje NM /nl 
给 定 她 在 第 一 年 中 有 n 次 事故 , 在 她 的 第 二 年 有 m 次 事故 的 条 件 概率 也 可 以 
通过 对 她 的 风险 类 型 取 条 件 得 到 


P{T=jIN=7}= 


k 
P{N =mINi = 对 = DP{N = mT =jN =n}P{T =jIN =n} 
j=1 


CR 
= > "IP{T = jlN = 1} 
_ Ze 
ml 5 er 和 Dj 
另 一 种 计算 P{N2 = mlNi = n} 的 方法 是 , 先 写 出 
P{Nz =m, Ni = n} 
P{Ni =n} 
然后 通过 取 条 件 于 T 以 确定 分 子 与 分 母 . 由 此 得 到 
DP{N2 =m, Ni =n|T = j}p; 
DP{N = nlT = j}p; 


n 


P{Ns = mlN =n} = 


P{N2 = mlNi =n}= 


by BW 
k 一 Xi -JJ_ 一 Aij 一 
ee 二 
Ti ml! nt 
a 
k 
Dev, 
大 一 2Aj Mm+nn 
_ De MM "pi 


k 和 
ml TE erN AD 
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3.6 一 些 应 用 


3.6.1 “列表 模型 


考虑 n 个 元 素 e1,…,en, 它们 是 一 个 有 序 的 列表 . 在 每 个 单位 时 间 对 于 其 中 的 
一 个 元 素 e; 有 需求 的 概率 忆 独立 于 过 去 的 情形 . 在 这 个 元 素 被 需求 后 , 它 就 移 至 
列表 的 第 一 个 位 置 . 例如 , 如 果 现在 的 次 序 是 el, e2, e3,e4, 而 若 es 被 需求 , 则 下 一 个 
次 序 为 €3,€1, €2, €4: 

我 们 关心 的 是 在 此 过 程 经 长 时 间 运作 后 , 确定 被 需求 元 素 的 位 置 的 期 望 . 然而 ， 
在 计算 这 个 期 望 之 前 , 我 们 先 观察 这 个 模型 的 两 个 可 能 的 应 用 . 第 一 个 应 用 是 我 们 
有 一 摆 参 考 书 ， 在 每 个 单位 时 间 随 机 选取 了 一 本 书 ,然后 放 回 到 这 操 书 的 最 上 面 . 
第 二 个 应 用 是 , 我 们 有 一 台 计 算 机 , 其 内 存 中 存放 着 被 需求 的 元 素 . 元 素 被 需求 的 概 
率 可 能 并 不 知道 . 如 果 计 算 机 查找 一 个 元 素 的 时 间 与 这 个 元 素 的 位 置 成 正比 , 为 了 
减少 计算 机 查找 各 元 素 所 花费 的 平均 时 间 , 它 将 把 这 个 元 素 放 在 列表 的 起 点 . 

为 了 计算 被 需求 元 素 的 位 置 的 期 望 , 我 们 从 对 选取 的 元 素 取 条 件 入 手 . 这 就 
得 到 

ElI 被 需求 的 元 素 的 位 置 | = > `E [位 置 | 选取 到 ei] 书 
i=1 


=》 Elei 的 位 置 | 选取 到 eijP = 》_ Ele; 的 位 置 ]P (3.15) 
i=1 i=l 
其 中 最 后 的 等 式 用 了 ei 的 位 置 与 e 被 选 上 这 个 事件 是 独立 的 条 件 , 因为 不 管 ei 的 
位 置 如 何 它 被 选 上 的 概率 都 是 已 . 
人 es 的 位 置 = 1+ 可 已 
j#i 
其 中 -{: 车 ej 在 ei 前面 
” 【0， 其 他 情形 
所 以 
Ele 的 位 置 =1+ 》 EI] =1+》_P{e; 在 ei 前 面 } (3.16) 
I#i j#i 


为 了 计算 P{ei 在 ei 前 面 }, 注意 , 如 果 对 它们 两 者 的 最 近 需 求 是 ej, 那么 ej 在 ei 前 
面 . 但 是 给 定 需 求 是 e; 或 ei 条 件 下 , 需求 是 ej 人 


Pteile 或 6j} = 


BE 


从 而 Pp 
Pfe; 在 ei 前 }= Bi 


3.6 一 些 应 用 111 


因此 我 们 从 式 (3.15) 与 式 (3.16) 得 出 
(被 需求 的 元 素 的 位 置 | = 1+ 》 PD 


inl 了 
列表 模型 将 在 4.8 节 中 做 进一步 分 析 , 在 那里 我 们 将 假设 不 同 的 排序 规则 , 即将 需 
求 的 元 素 移 向 列表 首位 的 规则 变 为 移 近 首位 方向 一 个 位 置 的 规划 ， 我 们 将 证 明 移 
近 一 个 位 置 的 规则 , 比 移 至 列表 首位 的 规则 , 需求 的 元 素 的 平均 位 置 更 小 . 


3.6.2 ”随机 图 


一 个 图 由 称 为 顶点 的 元 素 集合 V 及 称 为 弧 的 了 中 元 素 对 形成 的 集合 4 组 成 . 
一 个 图 可 以 图 示 为 , 对 顶点 画 一 个 圈 , 而 在 (i,j) 是 一 个 弧 时 , 在 顶点 i 和 j 间 画 一 
条 线 . 例如 , 如 果 V = {1,2,3,4}, 且 4 = {(1,2), (1,4),(2,3),(1,2), (3,3)}, 那么 我 
们 可 以 将 此 图 表示 为 图 3.1. 注意 , 弧 并 没有 方向 ( 弧 的 顶点 是 有 序 对 的 图 称 为 有 向 
图 ). 在 这 个 图 中 有 连接 顶点 1 与 2 的 多 重 弧 , 还 有 从 3 到 自己 的 一 个 自 结 弧 ( 称 为 
自 结 图 ). 


PD 
B+B 


© (7 
© 


图 3.1 一 个 图 


我 们 说 从 项 点 ;到 顶点 j(i 存在 一 条 路 径 , 如 果 存 在 一 列 顶点 了 ia 
使 Gin 汉 ，，Gx 都 是 红 如 果 在 【2 ) 个 不 同 对 的 顶点 中 的 每 一 对 者 存在 


一 条 路 径 , 那么 我 们 说 此 图 是 连通 的 . 图 3.1 是 连通 的 , 但 是 图 3.2 就 不 是 . 现在 考虑 
如 下 的 图 , 这 里 V = {1,2,…,n}, 而 A={(i,X()),i =1,2,…,n}, 此 处 XG) 是 独 
立 随机 变量 , 使 
P{X() =j} = j= ,n 

换 句 话 说 , 我 们 从 每 个 顶点 i 随机 地 在 n 个 顶点 中 选取 一 个 (包括 可 能 是 顶点 i 自 
己 ) 并 在 顶点 i 与 选取 的 顶点 间 连 一 个 弧 . 这 种 图 通常 称 为 陆 机 图 . 

我 们 关注 的 是 如 何 确定 这 样 得 到 的 随机 图 是 连通 的 概率 . 先 从 某 个 顶点 出 发 ， 
例如 顶点 1, 我 们 沿 着 顶点 序列 1,X(1),X?(1),… 行进 , 其 中 X"(1) = X(X"-1(1))， 
定义 N 为 X*(1) 不 再 是 一 个 新 顶点 的 首 个 上 值 . 就 是 说 ， 
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太 = 使 X4G) e {tLXGD，…Xe10D} 的 第 一 个 大 
@ 


@ 
图 3.2 一 个 不 连通 的 图 
我 们 可 以 将 它 表示 为 图 3.3， 其 中 从 XN-1(1) 出 发 的 弧 返 回 此 前 已 经 访问 过 的 
顶点 . 
为 了 得 到 此 图 为 连通 的 概率 , 我 们 首先 取 条 件 于 NN 得 到 


N 
P{ 图 是 连通 的 } = 》`P{ 图 是 连通 的 |N =k}P{N = 上}. (3.17) 
大 =1 


现在 , 在 NN = 给 定时 ,大 个 顶点 1,XX(1),…,X*-!(1) 是 彼此 连通 的 , 而 且 没有 从 
这 些 顶 点 出 发 的 其 他 的 弧 . 换 句 话说 , 如 果 我 们 将 此 大 个 顶点 视 为 一 个 超 顶点 , 那 
么 其 情形 就 类 似 于 我 们 有 一 个 超 顶 点 与 n 一 上 个 普通 的 顶点 , 而 且 有 从 这 些 普 通 顶 
点 出 发 的 其 他 的 弧 , 每 一 条 通 向 超 顶 点 的 弧 的 概率 为 k/n. 这 种 情形 的 解 可 在 引 理 
3.1 中 取 7=n 一 上 得 到 . 


图 3.3 
引 理 3.1 给 定 由 顶点 0,1,…,7 和 条 缴 组 成 的 随机 图 ， 即 (iY),i 一 1 2, 
其 中 ， 
， “| 概率 为 ， 了 一 1 
， 大 
0 概率 为 上 大 
那么 


P{ 图 是 连通 的 } = 
( 痪 句 话说 , 上 面 的 图 有 r + 1 个 顶点 , 其 中 有 r 个 普通 顶点 , 一 个 超 顶点 . 每 个 


顶点 发 出 一 条 弧 , 该 弧 以 概率 k/(r + 有 通 向 超 顶 点 , 而 以 概率 1/(r 十 月 通 向 普通 
的 顶点 . 没有 弧 从 超 顶 点 发 出 .) 
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证 明 ”对 7 用 归纳 法 证 明 . 对 于 任意 ,在 7 = 1 时 命题 正确 . 假定 命题 对 于 小 于 
的 值 都 正确 . 对 于 现在 考虑 的 情形 , 我 们 首先 对 六 = 0 的 弧 (7 七) 的 个 数 取 条 件 . 
由 此 推出 


ty 本 
Ps 通 } = 2 (过 通史 =0 的 缀 有 1 个 (1 ) (EF) 人 G18) 
现在 假定 从 有 个 弧 通 向 超 项 点 (参见 图 3.4), 其余 ri 个 弧 不 通 向 超 项 点, 此 情 
形 类 似 于 我 们 有 一: 个 普通 顶点 和 一 个 超 项 点 ,而 从 每 个 普通 硕 点 有 一 个 弧 以 概 
率 i/" 通 向 超 项 点 , 以 概率 1/r 通 向 每 人 普通 顶点 。 但 是 由 归纳 法 假设 这 样 产生 连 
通 图 的 概率 是 i/r. 因此 ， 


P{ 连 通 |% = 0 的 弧 有 i 个 } = 
而 由 公式 (8318) 我 人 有 本 
pe - 交 0] (各 ) (一 二 E04 二]- 吉 
这 就 完成 了 引 理 的 证 明 . mn 


O 
Or 
O 
图 3.4 7 个 弧 中 , 给 定 的 i 个 通 向 超 顶 点 的 情形 


因此 , 正如 引 理 3.1 所 描述 的 N = 大 的 情形 那样 , 当 =n 一 时 ,我们 看 到 , 对 
于 原来 的 图 大 
P{ 图 是 连通 的 IN = 同一 元 
而 由 公式 (3.17) 得 到 EIN] 
P{ 图 是 连通 的 } = 一 一 (3.19) 


n 


为 了 计算 E[N], 我 们 用 等 式 
EIN]= > P{N > 
i=1 


它 可 以 通过 定义 示 性 随机 变量 ,i > 1: 
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了 1， 若 < 和 N 
Lo 着 i>N 
证 明 . 因此 ， 
= 
i=1 
E[N] = 也 人 | =D ER]= DP{N>i) (3.20) 
i=1 i=1 i=1 


现在 , 如 果 顶 点 1, 久 (1),…,X“+(1) 都 不 相同 , 事件 {N > 守 就 发 生 . 因此 
n-2)  (n-i+l) (n—1)! 


s 一 
PIV2 = 全 1 n n (nC—ilni-! 


从 而 , 由 公式 (3.19) 和 公式 (3.20) 


1 -Dm 

Pf 本 是 过 通 的 ) = (n 一 而 一 二 台 看 几 j= 2D 

我 们 也 可 以 用 公式 (3.21) 得 到 当 n 很 大 时 图 连通 的 概率 的 近似 表达 式 . 为 此 
首先 注意 ,如果 N 是 均值 为 ”的 泊 松 随机 变 基 ,那么 

n—l 了 了 

P{X <n} i 

由 于 均值 为 n 的 泊 松 随机 变革 可 以 看 成 n 个 均值 为 1 的 独立 泊 松 随机 变 攻 的 和 ， 

由 中 心 极限 定理 推出 , 对 于 n 很 大 的 这 个 随机 变 其 近 似 地 有 正 态 分 布 , 它 小 于 其 均 

什 的 概率 为 1/2. 这 是 说 ,对 于 很 大 的 


从 而 对 于 很 大 的 m 


1 一 

此 , 对 于 很 大 的 n, 由 公式 (3.21) 有 
了 P{ 图 是 连通 的 } 六 

利用 由 斯 特 林 给 出 的 近似 , 对 于 很 大 的 nn 有 
no ntl/2e-nV2n 


于 是 我 们 看 到 , 对 于 很 大 的 nn 有 


en(m 一 11 
2nm 
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又 因为 本 n 
lim (SS) = lim Q-3 =e-! 
nmo0 n 用 一 oo n 


所 以 对 于 很 大 的 n 有 
P{ 图 是 连通 的 } ~ Yam 


现在 , 一 个 图 称 为 由 7 个 连通 分 其 所 组 成 , 如 果 它 的 顶点 可 以 分 为 > 个 子 集 , 使 
得 每 个 子 集 是 连通 的 , 而 且 在 不 同 的 子 集 的 顶点 间 没 有 弧 . 例如 , 在 图 3.5 中 的 图 由 
三 个 连通 分 量 {1,2,3}、 {4,5} 和 {6} 组 成 . 以 C 记 我 们 的 随机 图 的 连通 分 晤 的 个 


数 , 再 令 
Pli)=P{C=i} 


"LN, 


图 3.5 有 三 个 连通 分 二 的 图 


此 处 我 们 用 Pa(i) 表示 对 于 顶点 数 n 的 依赖 性 . 因为 由 定义 , 一 个 连通 图 恰 有 一 个 
分 荆 , 从 式 (3.21) 我 们 得 到 re 


RW-PC=Y -0 


所 已 

为 了 得 到 恰 有 两 个 分 基 的 概率 Pa(2), 我 们 先 观察 某 个 特定 的 顶点 , 例如 顶点 1. 若 
要 使 给 定 的 上 一 1 个 顶点 (例如 顶点 2,…,) 与 顶点 1 组 成 一 个 连通 分 基 , 而 余下 
的 n 一 上 个 顶点 组 成 第 二 个 连通 分 基 ， 就 须 有 

(i) 对 于 所 有 i =1,…,k, 有 XX(i) € {1,…,k}. 

(这 对 于 所 有 i = 上 十 1,…,n, 有 XX(i)j € {k++1,…,n}. 

( 阁 ) 顶点 1,…, 上 构成 一 个 连通 子 图 . 

(iv) 顶点 上 十 1,…,n 构成 一 个 连通 子 图 . 
上 面 发 生 的 概率 显然 是 


日 ( ; ， 及 (DRP-x(D) 


而 因为 从 顶点 2 到 n 中 选取 大 1 个 顶点 有 ( 1) 种 方式 , 所 以 我 们 有 


(3.22) 
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By) = G3) (SY SS) PD)P, rl) 


k=1 


从 而 (2) 可 由 式 (3.22) 算得 . 一般 地 , PP, 人) 由 北 推 公式 
n—itl ,| k k wi n—k 2 
m= > (DG (Fe) RP) 
给 出 


为 了 计算 连通 分 量 的 个 数 的 期 望 EI[C]， 首 先 
注意 我 们 的 随机 图 的 每 个 连通 分 量 必须 恰好 包含 一 
个 圈 (一 个 圈 是 对 于 不 同 顶 点 i,…, 认 的 形 如 
人) (2) (tk), (ik,i) 的 弧 的 一 个 集合 ). 
例如 , 图 3.6 描绘 了 一 个 图 . 

我 们 的 随机 图 的 每 一 个 连通 分 量 必 须 恰 好 包含 
一 个 圈 这 个 事实 , 最 容易 通过 下 述 方式 证 明 , 注意 如 
果 连 通 分 量 由 ” 个 顶点 组 成 , 那么 它 必须 也 有 7 个 
弧 , 因此 它 恰好 包含 一 个 圈 (为 什么 ?))， 于 是 , 我 们 
有 


图 3.6 一 个 图 
E[C] = E[ 图 的 个 数 |] = 也 区 ro = 和 ELU() 
s s 
其 中 求 和 遍及 所 有 的 子 集 5 c {1,2,…, 凡 ,而 


15)=/ + 如 果 5 中 的 顶点 是 某 一 个 圈 中 的 所 有 顶点 
0， 其 他 情形 


现在 如 果 S 由 上 个 顶点 组 成 , 例如 1,…,k, 那么 


ELC)] =P{1,X(1),…,X*-1(1) 都 不 同 , 且 含 于 1,…,h 而 X*(1) =1} 
_k-lk-2 11_(k-)! 


n n nn nk 


因此 , 由 于 大 小 为 的 于 集 个 数 为 ("), 我 们 有 


_ 忆 fkK-1! 
za- 二 人 全 
3.6.3 ”均匀 先 验 、 波 利 亚 坛子 模型 和 博 斯 - 爱 因 斯 坦 分 布 


假定 作 了 n 次 独立 试验 , 其 中 每 次 的 结果 是 成 功 的 概率 为 p. 假定 我 们 将 全 部 
的 成 功 次 数 记 为 X, 那么 X 是 一 个 二 项 随机 变量 , 使 得 


P{X =klp} = (ra -ln 


然而 , 我 们 现在 假设 尽管 每 次 的 结果 是 成 功 的 概率 为 p, 其 值 却 不 是 预先 确定 的 , 而 
是 按照 (0,1) 上 的 均匀 分 布 选取 的 . (例如 , 从 一 个 装 有 出 现 正面 的 概率 均匀 地 是 p 
的 所 有 可 能 值 的 硬币 的 大 柜 中 随机 地 选取 一 枚 . 然后 抛掷 此 硬币 n 次.) 在 这 种 情 
形 , 取 条 件 于 p 的 真实 值 , 我 们 有 


1 1 
PIX = = | Px=kp} fap= | (人 za-mr 
现在 , 可 以 证 明 


kl(n — k)! 
(n+1)! 


[ (1—p)"-*dp = (3.23) 
0 


故 


n\ kl(n— A)! 
Pe 的 (m+)! 


1 
= li (3.24) 


换 句 话说 , X 的 n+1 个 可 能 的 值 是 等 可 能 的 . 
作为 上 述 试验 的 另 一 种 描述 方法 , 我 们 计算 在 给 定 开 始 的 > 次 试验 中 有 上 次 成 
功 ( 且 有 "一 次 失败 ) 的 条 件 下 , 第 + 1 次 的 结果 是 成 功 的 条 件 概率 . 


P{ 第 ”+ 1 次 试验 结果 为 成 功 | 在 前 > 次 试验 中 有 大 次 成 功 } 
_ P{ 第 ”+ 1 次 试验 结果 为 成 功 且 在 前 次 试验 中 有 下 次 成 功 } 
P( 前 7 次 试验 中 有 大 次 成 功 ) 


1 
上 P{ 第 + 1 次 试验 结果 为 成 功 且 在 前 > 次 试验 中 有 上 次 成 功 jpjdp 
中 1/(r+1) 
1 
=(r+ 中 (era —p)"*dp 


k++ 1)!(r —k)! 
-+D() 由 式 (3.24) 


_ k+l1 
r+2 


即 如 果 前 7 次 试验 中 有 大 次 成 功 , 那么 下 一 次 试验 是 成 功 的 概率 是 (k 十 1)/(7 十 2). 

从 式 (3.25) 推出 , 另 一 种 对 试验 的 相继 结果 用 随机 过 程 的 描述 可 以 表述 如 下 : 
在 一 个 坛子 中 , 开始 装 有 一 个 白 球 和 一 个 黑 球 . 在 每 个 阶段 随机 地 取出 一 个 球 , 然 
后 将 它 放 回 , 同时 又 放 进 另 一 个 同色 的 球 . 例如 , 如 果 取 出 的 前 > 个 球 中 有 个 白 


(3.25) 
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球 , 那么 在 第 "+ 1 次 抽取 时 , 坛 中 有 大 + 1 个 白 球 和 7 一 上 +1 个 黑 球 , 从 而 下 一 个 
取出 的 是 白 球 的 概率 为 (k 十 1)/(r 十 2). 如 果 我 们 认定 取出 一 个 白 球 为 试验 成 功 , 那 
么 我 们 看 到 这 就 产生 了 原 模型 的 另 一 种 描述 . 后 面 的 这 个 坛子 模型 , 称 为 波 利 亚 坛 
子 模型 . 
注 (i) 在 上 =r 的 特殊 情形 , 式 (3.25) 有 时 称 为 拉 普 拉 斯 相继 规则 , 这 是 以 法 
国 数学 家 皮 埃 尔 ， 拉 普 拉 斯 命名 的 . 在 拉 普 拉 斯 的 时 代 ， 这 个 规则 引起 了 许多 争 
论 , 对 于 企图 将 它 用 于 不 同情 形 的 人 们 , 其 有 效 性 是 可 疑 的 . 例如 ， 它 被 用 于 检验 
诸如 命题 “如 果 你 已 经 在 餐厅 用 了 两 次 餐 , 两 次 都 很 好 , 则 下 一 次 也 很 好 的 概率 是 
3/4” 和 “因为 太阳 过 去 已 经 升 起 1 826 213 天 , 所 以 明天 它 升 起 的 概率 是 1 826 214/ 
1 826 215”. 这 类 断言 所 引起 的 混乱 在 于 , 事实 上 他 们 根本 就 不 清楚 他 们 所 描述 的 
情形 是 否 能 由 一 列 均匀 选取 的 并 且 具 有 相同 的 成 功 概率 的 独立 试验 建 模 . 

(ii) 在 试验 的 原来 的 描述 中 , 我 们 说 相继 的 试验 是 独立 的 , 而 事实 上 当成 功 概率 
已 知 时 , 它们 才 是 独立 的 . 可 是 , 当 p 视 为 随机 变量 时 , 相继 试验 的 结果 就 不 再 是 独 
立 的 , 因为 知道 一 个 结果 是 否 为 成 功 会 给 我 们 某 些 有 关 p 的 信息 , 它 反 过 来 能 导出 
关于 其 他 结果 的 信息 . 

上 面 的 讨论 可 以 推广 到 每 次 试验 有 两 个 以 上 结果 的 情形 . 假设 做 了 n 次 独立 试 
验 , 每 次 是 以 相应 的 概率 pi1,… ,pm 出 现 m 个 可 能 的 结果 1,…,m 中 的 一 个 . 如 果 
我 们 以 X; 记 在 次 试验 中 类 型 i 的 结果 出 现 的 次 数 , i = 1,…,m, 那么 随机 向 基 
XX ，…，Xm 有 多 项 分 布 


1 
P{X1 = 21, X2 = 2 Xm = Lmlp} = — 


1 p72 ,om 
pr 


其 中 z1,… ,zm 是 和 为 的 任意 的 非 负 整数 向 基 . 现在 假设 向 其 p= (p1,… ,pm) 
不 是 特定 的 , 而 是 按 一 个 均匀 分 布 选取 的 . 这 个 分 布 的 形式 为 


© 0gpSli=l,m, Tp=1 
0， 其 他 


以 上 的 多 项 分 布 是 次 利 克 雷 分 市 的 一 个 特殊 情形 , 而 且 利 用 该 分 布 的 积分 必须 是 1 
的 事实 不 难 证 明 v = (m 1) 
向 量 X 的 无 条 件 分 布 为 


Pa =aoan=am=| Po 一 2 一 mp es pm} 


| 


— 1)in! 
xf(p1,*……, pm)dp1:…… dpm = Cm ) ; | dpm 
211 ml 
ospisi 
Eri! 


现在 , 可 以 证 明 
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由 Ph pi dp dpm = (Hm zy Fm 1 (3.26) 
pt 
然后 利用 从 1 zi = mu 我 们 有 
四 _ nlm—D)! /n+m—1l 
POR =e Kn sm) = = ( i (3.27) 


ni+m—1 


了 个 可 能 的 结果 都 是 等 可 能 的 (zi + 
) 个 可 能 的 非 负 束 数 解 ) 式 (3.27) 给 出 的 分 布 有 时 称 为 


因此 , 向 基 (Xi …, Xm) 的 所 有 ( 


ci Ci 
m—1l 

博 斯 - 爱 因 斯 坦 分 布 . 
为 了 得 到 上 述 事 实 的 另 一 种 描述 , 我 们 计算 在 前 n 次 试验 中 类 型 i 的 结果 出 现 
的 次 数 为 zi,i = 1,…,m, 21 Zi = n 的 条 件 下 , 第 m + 1 次 结果 属于 类 型 ; 的 条 

件 概率 . 它 是 

P{ 第 n+1 次 是 j | 在 前 n 次 中 有 zi 次 类 型 i,i= 
Pi{ 第 n+1 次 是 j 且 在 前 n 次 中 有 zi 次 类 型 这 
P{ 在 前 n 次 中 有 zi 次 类 型 i,i= 1,…,m} 


!(m— 1)! 
oY [mm 辣 9 


ZI Tm! 
二 到 一 1N 一 
了 一 1 


其 中 分 子 是 对 p 向 基 取 条 件 得 到 的 , 而 分 母 由 式 (3.27) 得 到 . 由 式 (3.26) 我 们 有 


P{ 第 mn+1 次 是 诈 在 前 次 中 有 zi 次 类 型 i,i= 1,…,m} 
(zi + Dnl(m— D)! 


a 


,mm} 


+m)! +1 
上 二 和 本 二 (28) 
(n+m—1)! 


利用 式 (3.28), 现在 我 们 可 以 对 相继 结果 的 随机 过 程 引 入 一 个 坛子 模型 进行 描述 . 
也 就 是 说 , 考察 一 个 坛子 , 在 开始 时 含有 m 种 类 型 的 球 , 每 种 一 个 . 从 坛 中 随机 地 取 
出 一 个 球 , 然后 将 它 放 回 , 同时 又 放 进 另 一 个 同类 型 的 球 . 因此 , 如 果 前 n 个 取出 的 
球 中 有 类 型 7 的 球 zj 个 , 那么 在 第 十 1 次 抽取 前 , 坛子 里 的 mm 十 m 个 球 中 类 型 7 
的 球 有 zi 十 1 个 , 从 而 在 第 n 十 1 次 取得 类 型 j 的 球 的 概率 可 由 式 (3.28) 给 出 . 

注 考察 一 种 情况 , n 个 粒子 随机 地 分 布 于 mm 个 可 能 的 区 域 . 假定 至 少 在 试验 前 
这 些 区 域 显示 着 相同 的 物理 特征 .似乎 落 入 每 个 区 域 的 粒子 数 的 最 可 能 的 分 布 是 
Pi 三 1/m 的 多 项 分 布 . (这 当然 符合 这 个 事实 , 即 每 个 与 其 他 粒子 独立 的 粒子 等 可 
能 地 落 入 m 个 区 域 中 的 任意 一 个 .) 研究 这 些 粒 子 如 何 分 配 的 物理 学 家 观察 了 这 种 
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粒子 的 性 态 , 如 含 偶数 个 基本 粒子 的 光子 和 原子 . 然而 , 当 研究 得 到 数据 时 , 他 们 惊 
奇 地 发 现 观察 到 的 频率 并 不 服从 多 项 分 布 , 而 更 像 服从 博 斯 - 爱 因 斯 坦 分 布 . 他 们 之 
所 以 惊讶 是 因为 他 们 不 能 想象 所 有 可 能 结果 是 等 可 能 的 粒子 分 布 有 这 样 一 个 物理 
模型 . (例如 , 如 果 10 个 粒子 分 配 于 两 个 区 域 中 , 几乎 不 可 能 想象 出 两 个 区 域 各 有 5 
个 粒子 与 所 有 10 个 粒子 都 在 区 域 1, 或 所 有 10 个 粒子 都 在 区 域 2 都 是 等 可 能 的 .) 

然而 , 从 这 一 节 的 结果 , 我 们 能 更 好 地 理解 物理 学 家 两 难 的 原因 ， 事 实 上 , 这 
里 出 现 了 两 个 可 能 的 假设 . 首先 , 物理 学 家 收集 的 数据 可 能 在 实际 上 得 自 一 些 不 同 
的 情形 , 每 种 情形 有 它 自 己 的 特征 向 量 p, 由 它 给 出 一 个 在 所 有 的 p 向 量 上 的 均匀 
分 布 . 第 二 种 可 能 (由 坛子 模型 的 解释 所 得 ) 是 , 粒子 一 个 一 个 地 选取 它们 的 区 域 ， 
而 且 一 个 给 定 的 粒子 落 入 一 个 区 域 的 概率 粗略 地 近似 于 落 入 该 区 域 的 粒子 的 比率 . 
( 换 句 话说 , 目前 在 一 个 区 域 中 的 粒子 给 每 个 尚未 落下 的 粒子 提供 了 “吸引 " 力 .) 
3.6.4 ”模式 的 平均 时 间 

设 X = (Xi1,X2,…) 是 一 列 独立 同 分 布 的 离散 随机 变 基 , 使 得 

pi=P{X;=i} 

对 于 一 个 给 定 的 子 序列 或 一 个 模式 二 ……pi 令 卫 = 了 (in) 记 我 们 需要 观察 
直至 该 模式 出 现 所 需 的 随机 变量 的 个 数 . 例如 , 如 果 要 观察 的 子 序 列 是 3, 5, 1, 而 序 
列 久 = (5, 3, 1，3, 5, 3， 5, 1，6, 2,…), 那么 工 = 8. 我 们 要 确定 E[T]. 

首先 , 我 们 考虑 此 模式 是 否 有 一 个 重 释 , 此 处 我 们 说 , 模式 记 ,…,is 有 一 个 重 
登 , 如 果 存在 某 个 (1 < kk < n) 使 序列 的 最 后 上 个 元 素 与 它 的 前 上 个 元 素 相同 . 就 
是 说 , 如 果 对 某 个 上 ,1 < kk<n， 

(Hi = (人 

则 它 有 一 个 重生 . 例如 , 模式 3, 5, 1 没有 重 登 , 而 模式 3, 3, 3 则 有 重 倒 . 

情形 1: 模式 无 重合 

这 时 我 们 断言 , 7 等 于 j 十 n 当 且 仅 当 模 式 不 在 前 j 个 值 出 现 , 而 其 后 的 n 个 
值 是 和 ，…,in. 就 是 说 ， 

Ti=j+n®e {T > (Xt Xitn) = (i in)} (3.29) 


为 了 验证 (3.29), 首先 注意 T = j +m 显然 包含 了 了 > j 与 (Xjt1… ,Xjtn) 一 


(ia，……,in). 另 一 方面 , 假定 
T>j 与 (Xjtl……, Xitn) 一 (人 (3.30) 
设 k<n. 因为 (i，…,ik) 关 (in-kt1,…,in), 就 推出 工 关 7 二 有 但 是 (3.30) 蕴涵 


Tgj+n, 所 以 我 们 可 以 得 到 结论 工 = 了 +m. 这 样 我 们 就 验证 了 (3.29). 
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利用 (3.29), 我 们 有 
P{T=j+n}=P{T >5, (Xit1***, Xitn) = (i in)} 
然而 , 是 否 有 了 > j 由 值 X1,…,X; 决定 且 独 立 于 Xj+1,… ,Xi+n. 因此 
P{T=j+n}=P{T > j}P{(Xjt1 ,Xjtn) = (ye sin)} 
=P{T >j}p 
其 中 
p= Pipis Pin 
将 上 式 两 边 对 了 求 和 , 得 到 


oo oo 
1=》 PT=j+ 可 =p P{T >j} =pEIT] 
j=0 j=0 


所 以 ' 
Blrl=; 
情形 2: 模式 有 重 倒 
对 于 有 重重 的 模式 有 一 个 简单 的 诀窍 使 我 们 能 利用 无 重合 模式 的 结论 得 到 
EI[T]. 为 了 使 分 析 更 易 懂 , 考察 一 个 特殊 的 模式 , 如 已 = (3, 5, 1, 3, 5). 设 > 是 一 个 
没有 在 模式 中 出 现 的 值 , 而 以 Ts 记 直 至 模式 已 。 = (3, 5, 1, 3, 5, z) 出 现 的 时 间 . 即 
T: 是 将 z 放 在 原 模式 之 末 的 新 模式 出 现 的 时 间 . 因为 z 没有 在 原 模 式 中 出 现 , 这 
就 推出 此 新 模式 没有 重合 , 从 而 
1 
ElT:] = Pp 
其 中 p= TI;-1 pi, = p3p2p1. 因为 新 模式 只 能 出 现在 原 模式 之 后 , 写成 
Tz=T+4 


其 中 了 是 模式 P = (3, 5, 1, 3, 5) 出 现 的 时 间 , 而 4 是 在 模式 P 出 现 后 直到 模式 
P; 出 现 的 附加 时 间 . 同样 , 以 E[Tzlil,…,ir] 记 在 给 定 前 r 个 数据 值 为 记 ,… ,i; 的 
条 件 下 , 在 时 间 7 之 后 直至 模式 已 = 出 现 的 期 望 附 加 时 间 . 对 模式 (3, 5, 1, 3, 5) 出 
现 后 的 下 一 个 数据 值 X 取 条 件 , 给 出 


1+E[Tzl3,5,1]， 着 i=1 


i 1+E[Tz|3]， 若 1=3 
ELMIX = 让 =1 1 [la] 2 
1 十 E[Tz]， 若 % 尖 3 


所 以 
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E[Tz] = E[T] + E[A] 


3.31 
= E[T]+1+ ElT|3,5, lpi + ElTzl3]ps + E[Tz](1 —p1 — ps — pz) Da) 


但 是 由 
E[T:] = E[T(3, 5, 1)] + E[T:|3, 5, 1] 
给 出 
E[Tz|3,5,1 = E[7T:] — E[T(3, 5, 1)] 
类 似 地 
E[T:|3] = E[Tz] — EIT(3)] 
代 回 式 (3.31) 给 出 


pzEITz] = 也 [十 1 一 PEIT(3,5,1)] 一 psEIT(3)] 
但 是 , 由 在 没有 重合 的 情形 的 结果 
上 1 
EIT(3,5,1)] = Fr EIT(3)] = 流 


由 此 推出 结果 | 
E[Z] = pzE[Tz] + 一 一 = = + 一 一 
Paps Pp Paps 


作为 这 个 方法 的 另 一 个 说 明 ， 让 我 们 重新 考察 例 3.15, 它 是 关于 寻求 在 独立 
伯 努 利 试验 中 , 直至 连续 地 出 现 n 次 成 功 的 时 间 的 期 望 ， 就 是 说 , 在 模式 为 P = 
(1,1,…,1) 时 , 我 们 想 要 求 E[T]， 那 么 对 z 头 1, 我 们 考察 无 重合 的 模式 已 。 = 
(1,1,…,1,2), 令 Tz 是 它 的 形成 时 间 . 对 于 如 前 定义 的 4 和 XX, 我 们 有 
1+E[4]， 若 i=1 
E[AIX = 司 = 4 1, 若 i=z 
1+E[z]， 若 ;lz 


所 以 
E[A] = 1+ElAlpi + E[T:z](1 — pi — pz) 
也 就 是 了 ei 
~ Pi— pr 
EA = + Er 
随 之 有 


_ElA PET-1_ (Vp)" -1 
BIr] = Elr -BAI = 2 站 
其 中 最 后 一 个 等 式 用 了 BID = 
证 
任意 一 个 有 重 公 的 模式 已 = (it,.…,i) 的 平均 发 生 时 间 可 以 由 前 面 的 方法 得 
到 . 即 令 为 直至 无 重 到 模式 已 = = (il,…… ,az) 出 现时 的 时 间 , 然后 用 等 式 


E[T:] = EIT] + EIA] 
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将 EI7] 与 BIT] = 1/(pps) 联系 起 来 然后 ,在 忆 出 现 后 , 取 条 件 于 下 一 个 数据 信 
利用 形 如 

Br ,i = BIT] 一 IFG va 
的 量 得 到 [4] 的 一 个 表达 式 . 如 果 (in -…,ir) 无 重 矢 , 利用 无 重 熏 的 结论 可 以 得 到 
BEIr(i, |, 否则 , 在 于 模型 (1,…,ir) 上 重复 这 个 过 程 。 ， 
注 ”即使 模式 ih，.…,i, 包含 所 有 不 同 的 数据 值 , 我们 仍然 可 以 应 用 上 述 方法 . 例 
如 , 在 撞 硬 币 中 要 观察 的 模式 可 能 是 ; 正 、 反 、 正 . 在 此 情形 , 我 们 应 该 令 是 一 个 
不 在 此 模式 中 的 数据 值 , 并 用 上 面 的 方法 (虽然 pe = 0)， 因 为 pe 只 出 现在 解 的 最 
终 表达 式 psEITs] = ps/(pap) 中 且 其 值 为 1/p, 所 以 就 得 到 正确 的 答案 ，( 推 导 同 村 
由 果 的 一 个 大 格 的 方法 是 竺 革 一 个 正 的 e 天 少 恒 共生 p= 和 出 I, 大 
令 = 赵 于 0 


3.6.5 ”离散 随机 变量 的 k 记录 值 


今 i 是 独立 同 分 布 随机 变量 , 且 它 们 可 能 取 值 的 集合 是 正 整 数 , 而 以 
P{X = 放 (j > 1) 记 它 们 共同 的 概率 质量 函数 ， 假 设 这 些 随机 变量 接连 被 观测 ， 
如 果 

恰 有 上 个 i(i = 1,…,n) 值 使 X; > Xn 
就 称 X 为 记录 值 , 即 如 果 在 序列 的 前 个 值 (包括 Xn) 中 恰 有 大 个 值 至 少 与 它 
一 样 大 , 那么 序列 中 的 第 ” 个 值 是 一 个 上 记录 值 . 以 Rk 记 上 记录 值 的 排序 集 . 

令 人 惊奇 的 结果 是 , 不 仅 上 记录 值 的 序列 对 所 有 的 k 有 相同 的 分 布 , 而 且 这 些 
序列 是 相互 独立 的 . 这 个 结果 称 为 伊 格 纳 托 夫 定理 (Ignatov's theorem). 
定理 3.1( 伊 格 纳 托 夫 定 理 ) ”Ri(k > 1) 是 独立 同 分 布 的 随机 向 量 . 

证 明 ”定义 数据 列 X1,X2,… 的 一 系列 子 序列 为 : 第 iti > 1) 个 子 序列 由 至 少 与 i 
一 样 大 的 所 有 数据 值 组 成 . 例如 , 如 果 数 据 列 是 


2,5, 1,6,9, 8,3,4,1,5,7, 8,2, 1,3, 4,2,5,6, 1,... 


那么 其 子 序列 如 下 : 
>1: 2,5,1,6,9,8,3,4,1,5,7,8,2,1,3,4,2,5,6,1,... 
> 2: 2,5,6,9,8,3,4,5,7,8,2,3,4,2,5,6,... 
> 3: 5,6,9,8,3,4,5,7,8,3,4,5,6,... 
如 此 等 等 . 
以 邓 记 第 ;个 子 序列 的 第 7 个 元 素 . 即 XX 是 至 少 与 i 一 样 大 的 第 j 个 数据 
值 . 一 个 重要 的 观察 是 i 是 一 个 k 记 录 值 当 上 且 仅 当 X =i. 即 ;是 一 个 大 记录 值 当 
且 仅 当 第 不 个 至 少 与 i 一 样 大 的 值 等 于 i (例如, 对 于 上 面 的 数据 , 因为 第 5 个 至 
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少 与 3 一 样 大 的 值 等 于 3, 这 就 推出 3 是 5 记录 值 . ) 如 今 并 不 难 理解 第 二 个 子 序 
列 中 的 值 是 独立 地 按 相同 的 质量 函数 


P{ 在 第 二 个 子 序列 中 的 值 =j} =P{X=j|X>2}，j>2 


分 布 的 , 而 且 独 立 于 第 一 个 子 序列 中 等 于 1 的 值 . 类 似 地 , 第 三 个 子 序列 中 的 值 是 
独立 地 按 相 同 的 质量 函数 


P{ 在 第 三 个 子 序列 中 的 值 =j} =P{X=j|X>3},，j>3 
分 布 的 , 而 且 独 立 于 第 一 个 子 序列 中 等 于 1 的 值 以 及 第 二 个 子 序列 中 等 于 2 的 值 ， 
如 此 等 等 . 由 此 推出 事件 {Xi = 计 ,i> 17 > 1 都 是 独立 的 , 而 且 
P{ 是 一 个 下 记录 值 } = P{Xi = 计 =P{X=iX> 计 
现在 由 事件 {X = 计 (i > 1) 的 独立 性 以 及 P { 是 一 个 大 记录 值 } 不 依赖 上 这 个 事 
实 , 推出 对 所 有 的 大 > 1l, Rk 同 分 布 . 另外 , 由 事件 {2X = 1} 的 独立 性 推出 ， 全 
的 > 1, 随机 向 基 Rk 也 是 独立 的 . 
现在 假定 Xi(i > 1) 是 独立 的 取 有 限 个 值 的 随机 变量 , 其 概率 质量 函数 为 


m=P{X=2:), i=1,.…,m 
并 且 以 
T= min{n: 恰 有 上 个 i 值 ,i = 1,…,n, 使 X; > Xn} 
记 首 个 记录 指标 . 我 们 来 确定 其 均值 . 
命题 3.2 邻 入 =pi/ iPini==1,…,m. 则 有 


E[T] =k+(k— DT 
i=1 


证 明 ”假定 观察 的 随机 变量 Xi, X2,… 取 值 于 i,i 十 1,…,m, 相应 的 概率 为 
pj a 
PAST j=i ,mm 
当 观 察 数据 具有 上 面 的 质量 函数 时 , 以 到 记 其 首 个 上 记录 指标 , 注意 由 每 个 数据 值 
至 少 是 i 推出 ， 若 Xe = 则 上 记录 值 等 于 i, 且 Ti 等 于 k. 顺便 有 
E[T | Xk 一 让 一 大 
另 一 方面 , 若 Xk > i, 则 上 记录 值 将 超过 i, 从 而 所 有 等 于 i 的 数据 值 在 搜索 记录 
值 时 可 以 不 计 入 . 另外 , 因为 所 有 大 于 i 的 数据 值 具有 概率 质量 函数 


, pj Ms 
P{X=j|X>i} = 一 一 人 一 ， 二 
{X=j| } i 了 5 


由 此 推出 直到 一 个 记录 值 出 现 所 需 观察 的 大 于 i 的 数据 值 的 总 数 与 Ti+1 有 相同 
的 分 布 . 因此 
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E[T: | Xk > 4] = ElTit1+ NilXx > 
其 中 Ti+1 是 我 们 得 到 一 个 记录 值 所 需要 观察 的 大 于 i 的 变量 的 总 数 , 而 Ni 是 
此 时 观察 到 的 等 于 i 的 值 的 个 数 .现在 , 给 定 了 Xk > i 以 及 THl = n(n > )， 
就 推 得 观察 到 Ti+1 大 于 i 的 时 间 与 独立 试验 序列 中 已 知 第 次 试验 结果 为 成 功 
时 为 了 得 到 n 次 成 功 所 需要 的 试验 次 数 有 相同 的 分 布 , 其 中 每 次 试验 成 功 的 概率 
是 1 一 pi/ Zi>im = 1 一 入， 然后, 由 于 得 到 成 功 所 需 的 试验 次 数 是 一 个 均值 为 
1/(1- Ai) 的 几何 随机 变量 , 所 以 


Tin-l _ Tn 和 
ElTilTir1, Xk >d]=1+ a 了 


取 期 望 得 


Bs ElTin]—\ 


1—- 和 \ 


E[Ti | Xk >1]=E 
因此 , 取 条 件 于 是 否 有 Xi = 局 a 
EIT)] = EITIXk = A + ET Xk > (1 — Xi) = (k — DX + EITi+1] 
从 了 rr] = 上 开始 , 我们 得 到 
ElTn-1] = (k— 1)Mm-1 +k 


之 > 中- 


m—l 
ElTm-2] =(k— lMm-2+(k— lAm-1+k=(k—1) > N+k 
j=m-2 


一 1 m—l 
ElTm-s]=(k— Am-s+(k—1) > N+k=(k-1) > N+k 

j=m-2 j=m-3 

一 般 地 br 
EIT]=(k-1) DN+k 
因为 = 多 这 就 推 得 结果 . 上 
3.6.6 不 带 左 跳 的 随机 徘徊 
设 Xi(i > 1) 为 独立 同 分 布 的 随机 变量 . 令 PP = P{X; = 四), 并 假定 总 六 _1 PP = 

1. 这 就 是 说 , Xi 的 可 能 取 值 为 -1,0,1,…. 如 果 我 们 记 


So=0， Sn= 和 
i=1 


那么 随机 变量 序列 5,(n > 0) 称 为 不 带 左 跳 的 随机 徘徊 ，( 之 所 以 称 不 带 左 跳 是 
为 从 5n-1 到 Sn 至 多 下 降 1.) 

作为 应 用 , 我 们 考察 一 pe 系列 相同 赌局 的 赌 徒 , 在 赌局 中 他 每 局 最 多 输 
1. 那么 如 果 X 表示 该 赌 徒 在 第 i 局 的 所 得 , 那么 Sn 就 表示 在 前 n 局 后 他 的 全 部 
所 得 . 
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假设 该 赌 徒 参加 一 个 不 公平 赌博 , 其 含义 为 EL] < 0, 同时 令 v = -E[Xil. 再 

令 To=0, 对 于 k>0, 以 T_k 记 赌 徒 直 到 输 了 时 已 玩 的 局 数 , 就 是 说 
T_k = min{n: Sn = —k} 

必须 注意 T_k < co, 就 是 说 , 此 随机 徘徊 最 终 将 击 中 一 k. 这 是 因为 , 由 强大 数 定律 ， 
Sn/n 一 E[Xi] < 0 导致 S" 一 -co. 我 们 有 兴趣 确定 E[T_k] 和 Var(T_x). (可 以 证 
明 , 在 ELXi] < 0 时 两 者 都 有 限 .) 

分 析 这 个 问题 的 关键 点 是 , 注意 到 直至 财富 减少 上 时 已 经 玩 的 局 数 可 以 表达 
为 , 减少 1 时 的 已 经 玩 的 局 数 ( 即 T_1), 加 上 减少 1 后 直至 总 减少 量 为 2 时 的 附加 
局 数 ( 即 7_2 一 7_1), 加 上 减少 2 后 直至 总 减少 量 为 3 时 的 附加 局 数 ( 即 T_3 一 7T_2)， 
等 等 . 也 就 是 


大 
T-k=T-1+ >) 一 三 0-D) 
二 


然而 , 因为 所 玩 各 局 的 结果 都 是 独立 同 分 布 的 ,因此 Ti, 7T_2 一 Ti, Ts 一 T_2,…， 
T_k 一 了 _(k-1) 都 是 独立 同 分 布 的 . (就 是 说 , 在 任意 时 刻 开始 , 直至 赌 徒 的 财富 比 这 
个 时 刻 少 1 的 附加 的 局 数 独立 于 以 前 发 生 的 结果 , 并 且 与 7_! 同 分 布 .) 因此 , 这 
个 随机 变量 的 和 T_k 的 均值 与 方差 分 别 是 
Er #4] = kEIT_ 1], Var(T_k) = Var(T 1) 

我 们 现在 通过 对 首 局 赌博 的 结果 Xi 取 条 件 来 计算 T_1 的 均值 与 方差 . 现在 ， 
在 给 定 Xi 时 , T-1 等 于 1 加 上 在 开始 赌博 后 直至 赌 徒 财富 减少 Xi + 1 所 需 的 局 
数 . 因此 , 在 给 定 Xi 时 , T_1 与 1+T_(x,+1) 同 分 布 . 因此 

E[T_ |X1] =1 + EIT_(x,+1] =1+(X1+1)E[T-] 


Var(T-1|X1) =Var(T_(x,+1)) = (X1+ 1)Var(T-1) 
于 是 
ElT-1] = E[E[T-1|X1)] = 1+(-v+ 1)E[T-1] 
从 而 
ET =3 
这 说 明了 ' 
E[T-_A] = (3.32) 


类 似 地 , 记 o? = Var(X1), 由 条 件 方差 公式 可 得 
Var(T-1) =E[(X1 + 1D)Var(T-1)] + Var(X1E[T-1]) 
=(1 —v)Var(T-1) + (E[T-1])?o? 


2 
Oo 
=(1 一 zw)Var(T-1) + 所 


这 证 明了 二 
Var(T-1) = 页 


并 且 得 到 结论 加 
Var(T_k) = (3.33) 


有 例如 有 击 中 时 间 定 理 . 
命题 3.3( 击 中 时 间 定 理 ) 
Tb EPp{s, Ss i 
证 明 ”对 n 归纳 地 证 明 . 现在 , 当 n = 1 时 , 我 们 需要 证 明 
P{T =1} = AP{S = —k} 
不 管 怎样 , 在 上 = 1 时 上 式 是 正确 的 , 这 是 因为 
P{T-1=1}=P{$=-1}=Pi 
而 当 上 > 1 它 也 正确 , 这 是 因为 
P{T-k=1}=0=P{S1 =-k)}, k>1 
于 是 结论 在 ”= 1 时 正确 . Ob n>1 与 一 切 k>0 有 
P{Tk=n-1)}= -1P{Sn 1 =A} (3.34) 


现在 考察 P{T_k =n}. 对 于 Xi 取 条 件 得 


P{Tk = 可 = > 了 PfTe = 说 = 5)}P 
j=-1 
如 果 在 第 一 局 中 赌 徒 赢得 j, 且 第 一 局 后 的 附加 的 n 一 1 局 后 他 的 累计 损失 为 十 j， 
则 在 第 ”局 后 将 会 发 生 首次 下 降 上. 也 就 是 
P{T-k=n|X1=j}=P{T_(k+) =n—1} 
因此 


PT = 二 = 亏 P{T-k=n|X1 =j}D 
-2 P{T_-(g+7) =n— 1}P; 


- 革 4 了 pfs := —(k+ I)}P; 


其 中 最 后 的 等 式 来 自 归纳 法 假设 (3.34) 式 . 利用 
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Pfsu = -APG =j} =P{Sn1 = —(k+)} 
由 前 式 得 
PT = 可 = LIP{S, = -Pa = 
j=-1 
= Ip{S, = -kX = 刘 
j=-1 
a 4 了 pf =jls, = —k}P{S, = -时 
j=-1 
=P{s, = -4 {i Ei PUOG =jlg。= -及 
一 -一 jP{X1 = jlSn = —k} 
1 3 {X1=j } 
=P{S, = -A} 信 I+ Es, 号 -可 (3.35) 
然而 


—k =E[Sn|Sn = —A] 
=E[Xi +…+ Xn|Sn = 于 
=》 E[XilS, = -月 
1 
=nE[Xi|Sn = 一 全 


其 中 最 后 的 等 式 是 因为 X1,… ,Xn 独立 同 分 布 从 而 在 给 定 Xi 十 … 十 Xn = 一 k 的 
条 件 下 对 一 切 i 都 有 X; 的 分 布 相同 . 因此 


E[Xi1lSn = -月 = -= 
将 上 式 代入 (3.36) 式 给 出 
P{T-k nn} =P{Sn = A} (去 二 


这 就 完成 了 证 明 . 国 
假定 在 n 局 后 赌 徒 的 财富 下 降 上 .那么 这 是 他 的 财富 首次 下 降 上 的 条 件 概率 


P{T_k =n, Sn = —k 
P{T_k =n|Sn =—k} = 下 


_ Pre= 可 大 
二 二 全 E 全 二 却 (利用 击 中 时 间 定 理 ) 


1 ) = 人 Pp{S, = 人} 


n-ln 


是 
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在 本 节余 下 部 分 , 我 们 假定 -v = E[X] < 0. 将 我 们 在 前 面 推导 得 到 的 关于 
E[T_k] 的 结果 与 击 中 时 间 定 理 结合 起 来 , 就 给 出 了 以 下 的 等 式 


oo 


n=; 


£ Er = 六 ptmrxe= 几 = 并 ipfes= -月 
n=1 1 


上 


其 中 最 后 的 等 式 利用 了 击 中 时 间 定理 . 因此 
= 1 
rs =-A)== 


令 事件 5% = -的 示 性 随机 变量 为 I,. 也 就 是 , 令 


再 注意 
赌 徒 的 财富 为 -k 的 总 次 数 = 也 
n=1 


取 期 望 后 给 出 
了 嗜 徒 的 财富 为 -由 = 》P{Sn = 人} 一 (3.36) 
n=1 


现在 , 以 a 记 初 始 时 刻 后 随机 徘徊 总 是 负 值 的 概率 . 也 就 是 
Qa=P{ 对 一 切 n>1 有 5, < 0} 


为 了 确定 a, 我 们 注意 , 每 当 赌 徒 的 财富 是 -k 时 , 它 不 再 击 中 一 k 的 概率 是 a ( 因 
为 从 此 刻 开始 后 的 所 有 累计 所 得 都 是 负 的 了 ). 因此 , 赌 徒 的 财富 为 天 的 次 数 是 参 
数 为 a 的 几何 随机 变量 , 而 由 此 有 均值 1/a. 因此 由 (3.36) 得 


a=v. 


我 们 现在 来 确定 随机 徘徊 最 后 一 次 击 中 一 上 的 时 刻 L_k. L-k 二 n 要 求 5% = 天 且 
n 以 后 的 累计 所 得 的 序列 总 是 负 的 , 所 以 


P{L k=n} =P{S, = —k}a=P{Sn = -bu 
因此 


@ 因为 假定 了 E[X] = -~v < 0, 从 一 出 发 只 要 到 达 任意 状态 i > 一 k, 就 必然 会 回 到 一 k. 
一 一 译 者 注 
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ElL-k]=D npP{L_k=n} 
=0 
=v DD nP{Sn = —k} 
n=0 
= iP 二 n} (利用 击 中 时 间 定理 ) 


天 六 wpftr =n} 
n=0 

=£EIT2] 

=2 {ET + Var(T-x)} 


3.7 ”复合 随机 变量 的 恒等式 


令 加,X2,，… 是 一 列 独立 同 分 布 的 随机 变量 , 而 令 5 = ?1 Xi 是 它们 的 前 
nn 项 和 , m > 0, 其 中 So = 0. 回想 到 如 果 是 一 个 独立 于 序列 X1,X2,… 的 非 负 束 
数值 的 随机 变量 , 那么 
Sn = xX 


i=1 
称 为 复合 随机 变量 , 与 N 的 分 布 合 称 为 混合 分 布 . 在 本 节 中 , 我 们 将 首先 推导 含有 
这 样 的 随机 变量 的 一 个 恒等式 . 然后 我 们 特殊 化 到 X; 是 正 整数 值 的 随机 变 基 的 情 
形 , 证 明 这 个 恒等式 的 一 个 推论 , 而 后 用 这 个 推论 对 于 多 种 常见 的 混合 分 布 得 到 Sw 
的 概率 质量 函数 的 一 个 递 推 公式 . 
首先 , 令 M 是 一 个 与 序列 X1, X2,… 独立 的 随机 变量 , 并 且 使 


P{M=n}= 全 


命题 3.4( 复 合 随机 变量 恒等式 ) ”对 于 任意 函数 刀 
E[SNh(SN)] = EIN]E[Xih(S™)] 


n=1,2,.… 


证 明 
N 
E[Svh(SN)] =E > asj 


i=l1 


oo N 
=》) 了 宇 xmeow- P{N =n} (通过 对 NN 取 条 件 ) 


n=0 [i=1 
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oo 


-三 sn = P{N=n} 

n=0 j= 

-Es [Sx P{N=n} (由 NN 和 Xi,…,Xn 的 独立 性 ) 
-a E[Xih(SA)]P{N =n} y 


现在 , 因为 X1, X2,… 是 独立 同 分 布 的 ,并且 h(Sn) = h(Xi+… 十 Xn) 是 XX1,…， Xn 
的 对 称 函 数 , 由 此 推出 对 于 一 切 i = 1,…,n, Xih(5n) 有 相同 的 分 布 . 所 以 , 接着 上 
面 一 串 的 等 式 有 


E[Swh(SN)] = Dnsbensa tN =n} 
=EI[N] DsbensPtn 三 n} (M 的 定义 ) 
=E[N] oe (由 M 与 Xi，…,Xn 的 独立 性 ) 
=E[N] 二 E[Xih(SM)IM = njP{M = n} 
-BINIBLX (Su)] 


这 就 证 明了 命题 . 国 
现在 假设 Xi 是 正 整数 值 随机 变量 , 并 且 令 


Qj=P{X1=j}, ji>0 


P(Sw = 有) 的 相继 的 值 常常 可 以 从 命题 3.4 的 如 下 的 推论 得 到 . 
推论 3.5 


P{Sw =0} =P{N =0} 


1 大 
P{Sw = 对 =KEIN] DjosP{Su-1 =k-j)}, k>0 
j=1 


证 明 ”对 于 固定 的 k, 令 


_J 1 车 z=k 
"m= {2 若 z#k 


注意 Swh(Sw) 在 Sy = 时 等 于 ,在 其 他 情形 等 于 0. 所 以 
ElSwh(SN)] = AP{Sw = 月 
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而 由 复合 恒等式 得 
kP{Sw = k}= E[IN]E[Xih(Sm)] 
= 了 EIN] DE[Xih(SM)|X = jlar 
j=1 
-ITEMGSopa = jes (0 


= EIN] Si =k|X1 = 中 oj 


1 
klX1 - 


现在 


M 


P{Sw =k|X1 =}= ?位 zx- 


i=1 


=? i+ -| 
-r+ 
=?{i+ 呈 x- 


=P{Sm-1=k-j} 
其 中 倒数 第 二 个 等 式 得 自 XX2,… ,Xm 与 X1,…,XMm-!1 有 相同 的 联合 分 布 , 即 M 一 1 
个 独立 并 与 X1 有 相同 分 布 的 隧 机 变 基 其 中 M 一 1 独立 于 这 些 随 机 变量 . a 
论 由 等 式 (3.37) 得 证 . 
当 M 一 1 的 分 布 和 N 的 分 布 有 关 时 , 上 面 的 推论 对 计算 Sw 风机 二 
是 有 用 的 递 推 公式 , 这 将 在 以 下 的 几 个 小 节 中 阐述 . 
3.7.1 ” 泊 松 复合 分 布 
如 果 N 有 均值 和 的 泊 松 分 布 , 那么 
P{M -1=n}=P{M=n+1} 
_ (n+DP{N=n+1} 
轩 EIN] 
An+t1 
(n+1)! 


= (n+l)e™* 


因此 , M 一 1 也 是 均值 为 和 的 泊 松 随机 变量 . 记 
=P{tn=n} 
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由 推论 3.5 给 出 的 递 推 公式 可 以 写成 


大 
= XD josPes, k>0 
j=1 


注 当 Xs 都 恒 等 于 1 时 ,上 面 的 递 推 公式 化 简 为 关于 均值 为 的 泊 松 随机 变量 的 

著名 恒等式 
P{W=0}=e-\， P{N=n}= >P{N=n -1 n>1 

例 3.34 令 S 是 =4 和 

P{Xi=i} =1/4,， i=1,2,3,4 

的 复合 泊 松 随机 变量 . 我 们 利用 推论 3.5 给 出 的 递 推 公式 确定 P{S = 5}. 它 给 出 
P=e-*=e-4 

P=MuP=e- 

Py = A(aP +202P) = 3e-4 

2 = (aa +202P) = 5e 
P= ap +2a2P +3asPo) = Be-t 
P= an +2a2P2 + 3as 忆 +4aaPo) = Be 


入 1 
P= 3(aPi +202Ps + 303Py + 4a4Pi + 5asPh) = ee 国 


3.7.2 ”二 项 复合 分 布 


假设 NN 是 一 个 参数 为 > 和 p 的 二 项 随机 变 基 . 那么 
(n+l)P{N=n+1} 
EI[N] 
i 人 人 zed 一 p)r-n-1 
地 不 于 7! pe 
—1)! 
所 5 人 站 = 本 

于 是 M - 1 是 参数 为 一 1 和 pp 的 二 项 随机 变 基 . 

固定 p, 令 N(r) 是 一 个 参数 为 > 和 了 的 二 项 随机 变量 , 再 令 


已 (=P{Swo = 有 丹 


P{M -1=n}= 


+1(1 — p)"-1—n 


那么 由 推论 3.5 有 
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妃 (0) = (1—p)" 
大 
P(k) = 时 jaP (kj), k>0 
j=l 
例如 , 令 大 等 于 1, 2, 3, 就 给 出 
玉 ()=rpaa(1 一 人 7 
及 0)= 于 [amP-iG)+2azP -ai(O]] 


= 也 [er 一 Dpag(l —p)"? +202(1 —p)"1] 
P.(3)= Blo-1(2) + 202P, 101) + 30P. -1(0)] 


= PI -pat -ps +202(1 一 下 


+ 82(r 一 Dpar(1 —p)"? + osrp(1 —p)™! 
3.7.3 与 负 二 项 随机 变量 有 关 的 一 个 复合 分 布 
假设 对 于 定 值 mn 0 <p < 1, 复合 随机 变 基 N 具有 概率 质量 函数 


P{N=n} = (Hi )ra-w, n=0,1. 


这 样 的 随机 变量 可 以 想象 为 , 当 每 次 试验 独立 地 以 概率 p 成 功 , 且 已 经 得 到 了 总 共 
7 次 成 功 时 失败 的 次 数 .( 如 果 第 7 次 成 功 发 生 在 试验 n+ r 中 将 有 7n 次 失败 . 因 
此 , N +" 是 参数 为 > 和 p 的 负 二 项 随机 变量 . ) 利用 负 二 项 随机 变革 N + 的 均 
值 EIN +7] = r/p, 我 们 得 到 E[N] = r(1 一 p)/p. 

将 p 取 为 定 值 , 我 们 将 N 称 为 NB(r) 随机 变量 . 随机 变量 M - 1 具有 概率 质 
其 函数 
(n+lDP{N=n+1} 

EI[N] 
n+l1 和 卡拉 
-Ce 
(n+7)! 


i mr pl —p)" 


n+i+r 
=( 了 )rra-oy 
换 句 话说 , M 一 1 是 一 个 NB(r +1) 随机 变量 . 
对 于 一 个 NB(r) 随机 变量 N， 
PB(K) =P{Sy 一 丹 


P{M—-1=n}= 
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由 推论 3.5 得 
P(0)=p" 


大 
1 一 5 | 
P(k) = 区 Pa -j), k>0 
j=1 


于 是 公克 4 
如 四 = 一 Ba(0) =7p"(1 -pan 


P= Ee Bn) +200P-n(0) 
= + pn -本 +2aapr9 
已 (3) = 2 pn +2a2Prn1(1) + 303Pr41(0)] 


习 题 


1. 若 X 和 YY 都 是 离散 的 , 证 明 对 于 所 有 的 y, 只 要 py (y) > 0, 就 有 ,pxlY (zly) = 1. 

"2. 令 X 和 X2 为 具有 相同 参数 p 的 独立 几何 随机 变量 . 请 猜测 P{X1 = ilXi 十 X2 = n} 
的 值 . 再 通过 分 析 验 证 你 的 猜测 . 
提示 假定 连续 地 掷 一 枚 正面 朝 上 的 概率 为 p 的 硬币 . 如 果 第 二 个 正面 出 现在 第 ”次 抛掷 
时 , 那么 第 一 个 正面 出 现在 第 i(i = 1,… ,n 一 1) 次 抛掷 的 条 件 概率 是 多 少 ? 

3. X 和 的 联合 概率 质量 函数 p(z,y) 给 定 为 


1 1 入 
Pl)=5, P21)=3 7(3,D) = 
p03) = 吉 P22)=0，p(3,)= 走 ， 
p(13) =0， p(2,3) = 2(3,3) = 


对 于 = 1,2,3, 计算 E[X|Y = 训 
4. 在 习题 3 中 , 随机 变量 X 和 Y 是 否 独立 ? 
5。 一 个 坛子 中 装 有 3 个 白 球 , 6 个 红 球 , 5 个 黑 球 . 从 这 个 坛子 中 随机 地 选取 6 个 球 . 以 X 和 
Y 分 别 记 取 到 的 白 球 数 和 黑 球 数 . 计算 在 给 定 Y = 3 时 X 的 条 件 概率 质量 函数 ， 再 计算 
EXIY = 1]. 
“6, 在 以 下 的 假定 下 重 做 习题 5: 当 取 得 一 个 球 后 , 记 下 其 颜色 , 并 在 取 下 一 个 球 之 前 将 它 放 回 . 
7. 假定 X.、Y 和 2 的 联合 概率 质量 函数 p(z,y, z) 给 定 为 
p(LI) = 到 p(2,1,1) = h p(1,1,2) = ES p(2,1,2) = 


p12D)= 调 ，?(22D=0， p12D=0，p(2,2,2) = 


问 EIXIY = 2] 是 多 少 ? EIXIY = 2,2Z = 1] 呢 ? 


eI Sl 
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10. 


11. 


12. 


“13. 


14. 
15. 


16. 
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。 相继 地 撞 一 颗 均匀 的 盘子 . 令 X 和 Y 分 别 记得 到 一 个 6 和 一 个 5 所 必需 的 抛掷 次 数 . 求 


(a) E[X], (b) EIXIY =1], (ec) ELIXIY = 引 . 


,在 离散 情形 证 明 , 若 X 和 Y 独立 , 则 对 于 一 切 y 有 


E[XIY = y = E[X]. 
假定 X 和 Y 是 独立 的 连续 随机 变量 . 证 明 对 于 一 切 y 有 
EIXIY = y = E[X]. 
X 和 Y 的 联合 密度 是 
好 = 办 y 
f(z,y) = 0 
证 明 E[X|Y = =0. 
X 和 YY 的 联合 密度 给 定 为 
er-z/yre-y 
f(z,y) = ya 0<z<oo，0<y<oo 
证 明 EIXIY =y] =y. 
设 X 是 均值 为 1/A 的 指数 随机 变量 , 即 


jx(z) = Xe ， 0<z<oo 


0<y<o%, -yrgy 


求 E[XIX > 1]. 
设 X 是 (0,1) 上 的 均匀 随机 变量 . 求 E[XI|X < 1/2]. 
XX 和 YY 的 联合 密度 给 定 为 


f(sy) =, 0<z< 0<y<oo 


计算 E[X?|Y = yy]. 
随机 变量 X 和 Y 称 为 具有 二 维 正 态 分 布 , 如 果 它 们 的 联合 密度 对 于 -00 < z < oo, -oo < 
y < oo 给 定 为 


f(z i 仁 元 二 
人 oemwViE Pl ap) 


Zp) pr pa)y py) ,yu)’ 
“(Se) -和 ee) | 
其 中 oz,av, 店 ,pp 都 是 常数 , 满足 -1 < p < 1, oz > 0,0y > 0, -oo < hs < oo， 
—00 < jy < oo. 
(a) 证 明 X 以 均值 js 和 方差 o2 正 态 地 分 布 , Y 以 均值 jw 和 方差 02 正 态 地 分 布 . 
(b) 证 明 在 给 定 Y = y 时 ，X 的 条 件 密度 是 均值 为 La + (poz/oy)(y 一 jv) 方差 为 
02(1 一 p) 的 正 态 分 布 . 
P 称 为 X 和 YY 的 相关 系数 . 可 以 证 明 


p= BX = ps) po)] _ Cov(X,Y) 
GzOy azay 
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22. 


设 Y 是 参数 为 (s, a) 的 伽 马 随机 变量 . 它 的 密度 是 
fry(y)=Ce "WY !, y>0 


其 中 C 是 一 个 不 依赖 y 的 常数 . 再 假设 在 给 定 Y = y 时 , X 的 条 件 分 布 是 均值 为 y 的 泊 
松 分 布 . 即 

P{X=ilY =Y)}=e yi/i, i20 | 
证 明 在 给 定 X = i 时 , Y 的 条 件 分 布 是 参数 为 (s 十 i,a 十 1) 的 伽 马 分 布 . 
设 X1,…, Xn 是 独立 随机 变量 , 具有 关联 到 一 个 未 知 参数 9 的 共同 的 分 布 . 设 T=T(X) 
是 数据 牙 = (Xi,……Xn) 的 一 个 函数 . 如 果 在 T( 藉 ) 给 定时 ，Xi，…,Xn 的 条 件 分 布 不 
依赖 于 0, 则 T( 瑟 ) 称 为 9 的 一 个 充分 统计 重 . 在 如 下 各 种 情形 , 证 明 T( 瑟 )= 于 六; Xi 是 
9 的 一 个 充分 统计 量 . 
(a) Xi 是 均值 为 及 方差 为 1 的 正 态 随 机 变量 . 
(b) Xi 的 密度 是 f(z) = ge， z > 0. 
(c) Xi 的 质量 函数 是 plz) =0(1 一 0)!-*，z=0,1，0<0<1. 
(d) Xi 是 均值 为 6 的 泊 松 随机 变量 . 
证 明 , 如 果 X 和 联合 地 连续 , 则 


x= EXlY =wmondy 


某 个 病原 体 的 暴露 水 平 为 = 的 人 被 这 种 病原 体感 染 疾病 的 概率 为 P(z). 如 果 在 总 体 中 随 
机 选取 的 一 个 成 员 的 暴露 水 平 有 一 个 概率 密度 函数 .确定 该 成 员 暴露 水 平 的 条 件 概率 密 
度 , 如 果 给 定 他 或 她 ，(a) 有 此 病 ; (b) 没有 此 病 ; (c) 证 明 当 P(z) 对 z 递增 时 , 在 (a) 部 分 
的 密度 与 在 (b) 部 分 的 密度 之 比 也 对 z 递增 

考察 例 3.12, 它 是 关于 一 个 矿工 陷于 一 个 矿井 的 例子 . 以 N 记 矿 工 在 到 达 安全 地 前 可 选 的 
门 的 总 数 . 再 以 Ti 记 第 i 次 选择 的 行走 时 间 , i > 1. 又 以 X 记 矿 工 到 达 安全 地 的 时 间 ， 
(8) 给 出 一 个 联系 X 与 NN 和 Ti 的 恒等式 

(b) ELN] 是 多 少 ? 

(ce) E[Tw] 是 多 少 ? 

(d) BE [FX TIN =n] 是 多 少 ? 

(e) 利用 上 面 的 结果 , E[X] 是 多 少 ? 

假定 进行 独立 试验 直至 连续 地 出 现 k 个 相同 的 结果 , 其 中 每 一 个 等 可 能 地 是 m 个 可 能 结 
果 中 的 任意 一 个 . 如 果 以 N 记 试验 的 次 数 , 证 明 


mk 一 1 
EIN] = 全 二 


某 些 人 相信 在 展开 式 x = 3.141 59.… 中 相继 的 数字 都 是 均匀 地 分 布 的 , 即 他 们 认为 这 些 
数字 都 是 从 等 可 能 地 是 数字 0 到 9 中 任意 一 个 的 分 布 中 独立 地 选取 的 . 反对 该 假设 的 可 能 
依据 是 , 从 第 24 658 601 个 数字 开始 , 有 连续 九 个 7 的 一 个 连贯. 这 个 信息 与 均匀 分 布 的 
假设 是 否 一 致 ? 

为 了 回答 它 , 我 们 注意 到 由 上 面 的 计算 , 如 果 均 匀 假设 是 正确 的 , 那么 直至 出 现 九 个 相同 值 
的 一 个 连贯 的 数字 个 数 的 期 望 是 
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(10° —1/9=111111 111 

那么 , 近似 为 2500 万 的 实际 值 粗略 地 是 理论 均值 的 22% ， 但 是 , 可 以 证 明 在 均匀 假定 下 ， 
N 的 标准 差 接近 于 均值 . 结果, 这 里 的 观察 值 是 0.78 信 的 标准 差 , 近似 地 小 于 其 理论 均值 ， 
这 与 均匀 假定 十 分 一 致 的 . 

连续 地 掷 一 枚 出 现 正面 的 概率 为 p 的 硬币 , 直至 最 近 的 三 次 抛 拌 中 有 两 次 是 正面 . 以 N 记 
抛掷 的 次 数 (注意 如 果 前 两 次 抛掷 的 结果 都 是 正面 , 则 N = 2). 求 ELN]. 

连续 地 拌 一 枚 出 现 正面 的 概率 为 p 的 硬币 , 直至 出 现 至 少 一 个 正面 , 一 个 反面 为 止 . 

(a) 求 需要 抛掷 的 次 数 的 期 望 , 

(b) 求 出 现 正面 的 次 数 的 期 望 . 

(0) 求 出 现 反面 的 次 数 的 期 望 

(d) 在 连续 抛掷 直至 掷 出 总 数 为 至 少 两 个 正面 、 一 个 反面 的 情形 下 , 重 做 (a) 的 部 分 . 

做 一 系列 独立 的 试验 ， 每 次 试验 都 以 概率 pi,pa,ps 为 结果 1，2，3 之 一 , 这 里 并 ， 
pi=1. 

(a) 以 N 记 直 到 首次 试验 的 结果 恰好 出 现 3 次 时 所 需 的 试验 次 数 ， 例 如 试验 结果 是 3, 2， 

1, 2, 3, 2, 3, 则 NN = 7. 求 E[N]. 

(b) 求 直到 结果 1 和 结果 2 都 发 生 时 所 需 试验 的 期 望 次 数 . 

你 有 两 个 对 手 与 你 轮番 博弈. 与 A 博弈 时 你 赢 的 概率 是 pA, 而 与 B 博弈 时 你 赢 的 概率 是 
pa, 且 pe > pa. 如 果 你 的 目标 是 使 你 连 赢 两 次 所 需要 的 博弈 次 数 最 少 , 你 应 和 A 还 是 和 
B 开始 博弈? 

提示 ， 以 ELNi] 记 你 与 玩家 i 开始 后 所 需要 博弈 的 平均 次 数 ， 推 导 E[NA] 的 一 个 含有 
E[Ns] 的 表示 式 , 写 下 ELNs] 的 等 价 表达 式 , 然后 相 减 . 

连续 地 掷 一 枚 出 现 正面 的 概率 为 p 的 硬币 , 直至 出 现 模式 T,，T, H.( 即 当 最 近 的 抛掷 出 现 
正面 , 而 与 它 之 前 紧 接 的 两 次 抛掷 出 现 反面 时 , 你 停止 抛 据 .) 令 X 为 殷 撞 的 次 数 . 求 E[X]. 
波 利 亚 坛子 模型 假设 在 一 个 坛子 中 最 初 有 r 个 红 球 和 b 个 蓝 球 . 每 次 从 这 个 坛子 中 随机 取 
出 一 个 球 , 然后 将 这 个 球 以 及 与 它 同色 的 其 他 的 mm 个 球 一 起 放 回 坛子 中 . 令 Xk 是 前 上 次 
选取 中 抽 到 的 红 球 个 数 . 

(a) 求 ELx], 

(b) 求 E[Xa]. 

(c) 求 ELXa]. 

(d) 猜测 E[Xx] 的 值 , 然后 用 取 条 件 的 推理 验证 你 的 猜测 . 

(e) 对 你 的 猪 测 给 出 一 个 直观 的 证 明 . 

提示 , 给 这 r 个 红 球 和 b 个 蓝 球 标号 , 使 对 于 i 二 1,……,r 中 的 每 一 个 , 坛子 中 包含 一 个 类 
型 i 的 红 球 . 同样 对 于 j = 1,…,6 中 的 每 一 个 , 坛子 中 包含 一 个 类 型 j 的 蓝 球 现在 假设 
无 论 何 时 取 到 一 个 红 球 , 将 它 及 与 它 同类 型 的 其 他 的 m 个 球 一 起 放 回 坛子 中 . 同样 , 无 论 
何 时 取 到 一 个 蓝 球 , 将 它 及 与 它 同类 型 的 其 他 的 mm 个 球 一 起 放 回 坛子 中 . 现在 用 对 称 推理 
确定 任意 给 定 的 一 次 取得 到 红 球 的 概率 . 

两 个 玩家 轮流 射击 一 个 目标 , 玩家 i 每 次 射击 中 标的 概率 为 pi,i = 1,2. 在 连续 两 次 射 中 
目标 后 射击 结束 .以 js 记 玩 家 i 首先 射击 的 平均 射击 次 数 , i = 1,2. 
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( 引 求 jn 与 po. 
(b) 以 hs 记 玩家 i 首先 射击 的 平均 击 中 目标 次 数 , i = 1,2. 求 hi 与 h2. 
令 Xi(i > 0) 是 独立 同 分 布 的 随机 变量 , 具有 概率 质量 函数 


pO) =P{Xi=j)}, j=bm, >p0)=1 
二 

求 EI[N], 其 中 NN =min{n > 0: Xa = Xo}. i: 
一 列 二 进 制 数 中 的 每 个 元 素 是 1 的 概率 为 p, 是 0 的 概率 为 1 一 p. 连续 出 现 一 个 相同 的 值 
的 一 个 极 大 子 序列 , 称 为 一 个 连贯 ， 例如, 如 果 结果 序列 是 1, 1, 0, 1, 1, 1, 0， 第 一 个 是 长 
度 为 2 的 连贯, 第 二 个 是 长 度 为 1 的 连贯, 第 三 个 是 长 度 为 3 的 连贯. 
(a) 求 第 一 个 连贯 的 平均 长 度 . 
(b) 求 第 二 个 连贯 的 平均 长 度 . 
做 每 次 结果 为 成 功 的 概率 是 p 的 独立 试验 . 
(a) 求 至 少 有 n 次 成 功 及 m 次 失败 所 需 的 平均 试验 次 数 . 
提示 , 知道 前 n 十 m 次 试验 的 结果 有 用 吗 ? 
(b) 求 至 少 有 m 次 成 功 或 者 至 少 有 m 次 失败 所 需 的 平均 试验 次 数 . 
提示 : 利用 (a) 部 分 的 结果 . 
如 果 以 Ri 记 在 时 段 i 所 赚 的 随机 金额 , 那么 沁 首 ,01Ri( 其 中 0 < 6 < 1) 是 一 个 特定 
的 常数 , 称 为 折扣 因子 为 8 的 总 折扣 报酬 . 令 了 是 以 1 一 8 为 参数 的 几何 随机 变量 , 且 与 
RR 独立 , 证 明 总 折扣 报酬 的 期 望 等 于 T 前 赚 的 平均 总 报酬 (无 折扣 ). 即 证 明 

oo 工 

E 区 ea =B Ez 加 

‘1 ‘1 
搓 n 颗 般 子 . 将 它们 中 出 现 6 点 的 置 于 一 旁 , 再 撕 余 下 的 山 子 . 如 此 重复 直至 所 有 的 贷 子 
都 出 现 6. 以 N 记 需 要 掷 的 次 数 ，( 例 如 , 假定 n = 3, 而 开始 恰 有 两 颗 佣 子 掷 出 6. 然后 搓 
另 一 颗 般 子 , 如 果 它 出 现 6, 则 N = 2.) 令 mn = ELN]. 
(a) 推导 mn 的 一 个 递 推 公式 , 并 用 它 计算 mi,i = 2,3,4. 并 证 明 ms ~ 13.024. 
(b) 以 Xi 记 在 第 i 次 抛 毛 时 散 子 的 颗 数 . 求 已 [ES X]. 
考虑 n 次 多 项 试验 , 其 中 每 一 次 试验 独立 地 以 概率 Pi 出 现 结果 i i1pi =1. 以 Xi 记 
出 现 结果 i 的 次 数 . 求 E[X1|X2 > 0]. 
令 po =P{X =0} 并 且 假 设 0<po<1. 令 久 =EIX] 和 o?=Var(X). 求 
(a) EIXIX # 0], 
(b) Var(XIX #0). 
一 份 手稿 送 交 由 打字 员 A、B 和 C 组 成 的 打字 公司 . 如 果 由 A 打字 , 错误 的 个 数 是 均值 为 
2.6 的 泊 松 随机 变量 ; 如 果 由 B 打字 , 错误 的 个 数 是 均值 为 3 的 泊 松 随机 变量 ; 如 果 由 C 
打字 , 错误 的 个 数 是 均值 为 3.4 的 泊 松 随机 变量 . 以 X 记 打 好 的 手稿 中 的 错误 个 数 . 假定 
每 个 打字 员 等 可 能 地 做 这 个 工作 . 
(a) 求 E[X]. 
(b) 求 Var(X). 
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假设 Y 在 (0, 1) 上 均匀 地 分 布 , 而 在 给 定 Y= y 时 , X 是 (0, y) 上 的 均匀 随机 变量 求 

E[X] 和 Var(X). 

随机 地 洗 一 副 标 有 数 1 到 n 的 n 张 卡片 , 以 使 nl 个 可 能 的 排列 等 可 能 出 现 . 每 次 翻 开 一 

张 卡片 , 直至 数 1 的 卡片 出 现 . 这 些 朝 上 的 卡片 组 成 第 一 个 循环 . 现在 我 们 (通过 看 翻 开 的 

卡片 ) 确定 在 没有 翻 开 的 卡片 中 数字 最 小 的 一 张 , 并 继续 翻 卡片 直至 这 张 卡片 出 现 . 这 个 新 

的 卡片 的 集合 组 成 第 二 个 循环 我们 再 确定 在 余下 的 卡片 中 数字 最 小 的 一 张 , 而 且 翻 卡片 

直到 它 出 现 , 如 此 等 等 , 直至 所 有 的 卡片 都 已 翻 开 . 以 mn 记 循 环 个 数 的 均值 . 

(a) 推导 mn 的 一 个 由 mx(k = 1,2,…,n 一 1) 表达 的 递 推 公式 . 

(b) 从 mo = 0 开始 , 用 此 递 推 公式 求 mi, mz, m3, ma. 

(ce) 猜测 mn 的 一 般 公式 . 

(d) 用 归纳 法 证 明 你 的 公式 . 即 证 明 它 对 n = 1 成 立 , 然后 假定 它 对 1,… ,n 一 1 中 所 有 的 
值 都 正确 , 并 证 明 这 就 推出 对 n 正确 . 

(e) 如 果 一 个 循环 结束 于 i, 就 令 Xi = 1, 否则 令 Xi = 0,i = 1,…,n. 利用 这 些 Xi 表示 
循环 数 . 

(f) 用 (e) 中 的 表示 确定 mn. 

(g) 随机 变量 X1,… ,Xn 是 否 独立 ? 给 出 解释 . 

(h) 求 循环 个 数 的 方差. 

一 个 囚犯 困 于 一 间 有 三 个 门 的 囚 室 . 第 一 个 门 通 向 一 条 隧道 , 经 过 此 隧道 两 天 后 他 将 回 到 

该 办 室 . 第 二 个 门 通 向 一 条 隧道 , 经 此 隧道 3 天 后 他 还 将 回 到 该 办 室 . 第 三 个 门 立刻 通 向 自 

由 . 

(a) 假定 囚犯 总 是 分 别 以 概率 0.5, 0.3, 0.2 选取 门 1,2,3. 问 直 到 他 获得 自由 的 天 数 的 期 
望 是 多 少 ? 

(b) 假定 囚犯 总 是 等 可 能 地 在 他 没有 用 过 的 门 之 中 选取 问 直 到 他 获得 自由 的 天 数 的 期 望 
是 多 少 ? (假如 囚犯 在 开始 时 尝试 门 1, 然后 , 当 他 回 到 了 囚 室 , 他 现在 就 只 从 门 2, 3 选 
取 .) 

(c) 对 于 (a) 和 (b), 求 到 囚犯 到 达 自 由 的 天 数 的 方差 . 

工人 1,…,n 目前 都 闲 着 . 假定 每 个 工人 独立 地 胜任 某 个 职位 的 概率 为 p, 而 这 个 职位 又 等 

可 能 地 派 给 他 们 中 胜任 的 一 个 ( 若 无 人 胜任 , 则 此 职位 被 拒 ). 求 下 一 个 职位 派 给 工人 1 的 

概率 . 

如 果 Xi(i = 1,…,n) 是 独立 的 正 态 随机 变量 , 其 中 Xi 有 均值 J; 和 方差 1, 则 称 随机 变 

基 并 志 ; X? 为 非 中 心 卡 方 随机 变量 . 

(a) 如 果 X 是 具有 均值 上 和 方差 1 的 正 态 随机 变量 , 证 明 对 于 |t| < 1/2, X? 的 矩 母 函 数 
是 

(1— 20) -ae 

(b) 求 非 中 心 卡 方 随机 变量 学 站，X? 的 矩 母 函数 , 并 证 明 学 站 X? 的 分 布 对 均值 /4，…， 
Am 的 依赖 只 是 通过 它们 的 平方 和 . 于 是 我 们 说 沁 _， X? 是 参数 为 n 和 0 = 4 
的 非 中 心 卡 方 随机 变量 . 

(c) 如 果 所 有 的 js = 0, 则 称 沁 "_ X? 是 自由 度 为 n 的 卡 方 随机 变量 . 通过 微分 矩 母 函 
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数 来 求 它 的 期 望 值 和 方差 

(d) 令 天 是 均值 为 6/2 的 泊 松 随机 变量 , 假定 取 条 件 于 K = k 时 随机 变量 W 具有 自由 
度 为 n 十 2k 的 卡 方 分 布 . 通过 计算 矩 母 函数 证 明 W 是 参数 为 n 和 9 的 非 中 心 卡 方 
随机 变量 . 

(e) 求 参数 为 nn 和 9 的 非 中心 卡 方 随机 变量 的 期 望 值 和 方差 

对 于 P{Y e A} > 0, 证 明 

EIXI{Y e A}] 


EXlY eAl= -preAd ， 


其 中 I{B} 是 事件 B 的 示 性 变量 , 如 果 B 发 生 则 等 于 1, 否则 等 于 0. 
在 给 定 的 一 天 进入 某 商 店 的 顾客 数 按 均值 为 和 = 10 泊 松 地 分 布 . 一 个 顾客 花费 的 钱 数 在 
(0, 100) 上 均匀 地 分 布 . 求 商店 在 给 定 的 一 天 收入 的 钱 数 的 均值 和 方差 . 
一 个 在 实 直 线 上 行走 的 人 试图 到 达 原 点 .然而 , 期 望 的 一 步 越 大 , 这 一 步 结果 的 方差 也 越 
大 . 特别 地 , 只 要 这 个 人 在 位 置 z, 下 一 步 他 就 移 向 一 个 均值 为 0 和 方差 为 Bz? 的 位 置 . 以 
Xn 记 此 人 在 n 步 后 的 位 置 . 假定 Xo = zo. 求 
(a) E[Xn], 
(b) Var(Xn). 
(a) 证 明 
Cov(X,Y) = Cov(X, E[Y|X]) 
(b) 假设 对 于 常数 a 和 b， 
了 E[YIX] =a+bX 
证 明 
b= Cov(X,Y)/Var(X) 
若 E[YIX] = 1, 证 明 
Var(XY) > Var(X) 
假定 我 们 想 用 预测 值 Yi ，… , Y 之 一 来 预测 随机 变量 X 的 值 , 其 中 每 个 满足 E[Yi|X] = 
义 . 证 明 最 小 化 E[(Yi 一 外 的 预测 值 Yi 是 方差 最 小 者 . 
提示 用 条 件 方差 公式 计算 Var(Yi). 
A 和 B 对 弈 一 系列 博弈 , 每 次 博弈 A 赢 的 概率 为 p. 最 终 的 赢家 是 首先 比 另 一 个 人 多 谨 两 
次 的 玩家 . 
(a) 求 A 是 最 终 的 赢家 的 概率 . 
(b) 求 玩家 博弈 的 次 数 的 期 望 
在 桶 中 有 三 枚 硬币 . 当 抛掷 这 些 硬币 时 , 正面 向 上 的 概率 分 别 为 0.3, 0.5, 0.7. 从 这 三 枚 硬 
币 中 随机 选取 一 个 , 然后 抛掷 它 10 次 . 令 N 是 在 这 10 次 中 得 到 的 正面 数 . 
(a) 求 P{N =0}. 
(b) 求 P{N =n},n=0,1,.…,10. 
(e) N 是 否 有 二 项 分 布 ? 
(d) 如 果 在 每 次 出 现 正面 时 ,你 赢 1 元 , 而 在 每 次 出 现 反 面 时 , 你 输 1 元 . 这 是 否 是 公平 博 
弈 ? 给 出 解释 


142 


第 3 章 条 件 概率 与 条 件 期 望 


51. 


52. 


“53. 


“54. 


“55. 


56. 


57. 


“58. 


59. 


假定 X 是 参数 为 p 的 几何 随机 变量 , 求 X 是 偶数 的 概率 . 

假设 X 和 了 是 分 别 有 密 度 fx 和 fy 的 独立 随机 变量 , 确定 P{X 十 Y < z} 的 一 维 积分 
表达 式 . 

假设 X 是 均值 为 入 的 泊 松 随机 变量 . 而 参数 入 本 身 是 一 个 均值 为 1 的 指数 随机 变量 证 
明 P{X = 可 二 (3 

独立 试验 每 次 成 功 的 概率 为 p, 该 试验 进行 至 连续 出 现 上 次 成 功 为 止 . 以 X 表示 这 系列 试 
验 成 功 的 总 次 数 , 并 记 已 = P{X =n}. 

(a) 求 及 

(b) 想象 试验 永远 继续 , 通过 对 首次 失败 取 条 件 , 推导 一 个 P,m > 上 的 递 推 方程. 

(c) 通过 求解 P 的 递 推 方程 验证 (a) 的 答案 . 

(d) 在 p=0.6,k= 3 时, 求 Ps. 

在 上 面 的 问题 中 , 令 Mk = E[X]. 对 Mx 推导 一 个 递 推 方程 并 求解 . 

提示 , 由 Xk = Xk-1 十 Ak,k-! 开始 , 其 中 Xi 是 首次 达到 相继 i 次 成 功 时 总 的 成 功 次 数 ， 
而 Ak,k-1 是 从 已 知 的 相继 卡 一 1 次 成 功 的 一 列 试验 到 相继 上 次 成 功 的 一 列 试验 的 附加 次 
数 . 
数据 显示 在 雨天 伯克利 (美国 加 利 福 尼 亚 州 西部 城市 ) 的 交通 事故 数 是 均值 为 9 的 泊 松 随 
机 变量 , 而 在 晴天 是 均值 为 3 的 泊 松 随机 变量 . 以 X 记 明 天 的 交通 事故 数 ， 如果 明天 下 雨 
的 概率 是 0.6, 求 

(a) E[X], 

(b) P{X = 0}， 

(c) Var(X). 

在 下 一 个 雨季 的 暴风 雨 的 次 数 是 按 泊 松 分 布 的 , 但 是 其 参数 值 在 (0,5) 上 均匀 分 布 . 即 4 
在 (0,5) 上 均匀 分 布 , 而 给 定 4 = 和 时 , 暴风 雨 的 次 数 是 均值 为 和 的 泊 松 随机 变量 , 求 在 
这 个 雨季 中 至 少 有 三 次 暴风 雨 的 概率 . 

假设 在 Y = y 时 , NN 的 条 件 分 布 是 均值 为 y 的 泊 松 分 布 . 再 假设 Y 是 参数 为 (7, 入) 的 徊 
马 随机 变量 , 其 中 > 是 正 整 数 . 即 假设 


EP 
P{N=nlY =y} =e ST 


入 和 Xe-xXy(Ay)r-1 
4 fr(y)= ll > 0 
(a) 求 E[N]. 
(b) 求 Var(N). 
(9 求 PIN = 吕 . 
(d) 利用 (c) 推断 N 与 在 每 次 试验 的 成 功 概率 为 p = 二 的 独立 试验 在 7 次 成 功 前 出 
现 失败 的 总 次 数 同 分 布 . 
假定 每 张 新 奖 券 的 收集 都 与 过 去 独立 , 收集 到 类 型 i 奖券 的 概率 是 p;. 总 共 收集 到 n 张 奖 
券 . 令 4; 表示 事件 “这 n 张 奖 券 中 至 少 有 一 张 是 类 型 i 奖券 ". 对 于 i 关 小 通过 下 列 方式 
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计算 P(AiA4;): 

(a) 取 条 件 于 这 n 张 中 类 型 i 奖券 数 Ni 

(b) 取 条 件 于 首次 收集 到 类 型 i 奖券 的 时 间 下 i; 

(c) 用 恒等式 P(AiU 4j) = P(Ai) +P(Aj;) — P(A;A;). 

两 个 玩家 轮流 抛掷 一 枚 正面 朝 上 的 概率 为 p 的 硬币 . 第 一 个 得 到 正面 的 人 是 启 家 . 我 们 关 
注 的 是 第 一 个 玩家 是 赢家 的 概率 , 我 们 称 它 为 f(p). 在 确定 这 个 概率 之 前 , 回答 以 下 问题 ， 

(a) 你 认为 f(p) 是 p 的 单调 函数 吗 ? 如 果 是 , 它 是 递增 的 , 还 是 递减 的 ? 

(b) 你 认为 iimp1 f(p) 的 值 是 多 少 ? 

(6) 你 认为 limp-.o f(p) 的 值 是 多 少 ? 

(d) 求 f(p). 

假设 在 习题 29 中 射击 在 中 标 两 次 时 结束 ， 以 mi 记 玩 家 i 先 射 时 首次 中 标 所 需 的 平均 射 
击 数 , i = 1,2. 再 以 Pi 记 玩家 i 先 射 时 玩家 1 首次 中 标的 概率 , i = 1, 2. 

(a) 求 ml 和 ma， 

(b) 求 忆 和 已. 

对 以 下 的 问题 , 假定 玩家 1 先 射击 . 

(e) 求 最 后 的 射击 由 玩家 1 中 标的 概率 . 

(d) 求 两 次 都 是 由 玩家 1 中 标的 概率 . 

(e) 求 两 次 都 是 由 玩家 2 中 标的 概率 . 

(f) 求 射击 数 的 均值. 

A、B 和 C 是 势均力敌 的 网 球 手 . A 与 B 先 比赛 一 场 , 赢 的 人 就 与 C 比赛 . 如 此 继续 , 说 的 
人 总 是 与 等 候 的 人 比赛 , 直至 其 中 一 个 球 手 在 一 系列 比赛 中 连 启 了 两 场 , 就 宜 布 该 球 手 为 最 
终 启 家. 求 A 是 最 终 赢家 的 概率 

假设 有 n 类 奖券 , 每 一 类 新 奖券 的 获得 都 独立 于 过 去 的 选取 , 它 等 可 能 地 是 n 类 中 的 任意 
一 类 . 假设 某 人 继续 收集 直到 得 到 全 套 中 每 一 类 至 少 有 一 张 为 目 . 

(a) 求 在 最 后 的 收集 中 恰 有 一 张 类 型 i 奖券 的 概率 . 

提示 : 取 条 件 于 在 首 张 类 型 i 奖券 出 现 前 收集 到 的 类 型 数 了 . 

(b) 求 在 最 后 的 收集 中 恰好 出 现 一 张 的 类 型 数 的 期 望 . 

A 和 B 轮流 地 掷 一 对 山子 ，A 先 开始 . A 的 目标 是 得 到 点 数 和 为 6, 而 B 的 目标 是 得 到 点 
数 和 为 7. 无 论 哪个 玩家 达到 他 的 目标 , 博弈 就 结束 , 而 该 玩家 就 是 赢家 . 

(a) 求 A 是 赢家 的 概率 . 

(b) 求 掷 这 一 对 般 子 的 次 数 的 期 望 

(e) 求 掷 这 一 对 般 子 的 次 数 的 方差. 

在 一 个 含有 n 个 球 的 管 中 , 红 球 的 个 数 等 可 能 地 是 0, 1,… ,n 中 任意 一 个 值 的 随机 变量 . 
即 


P{i 个 红 ,n 一 i 个 非 红 } = 元 1， 六 
每 一 次 随机 地 拿 出 一 个 球 . 以 次 记 在 前 大 次 选取 中 的 红 球 数 , k= 1,…,n 
( 引 求 P{Yn = 四 ,= 0 1 


(b) 求 P{Yn-1 = 站 },j=0,1,…,n. 
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(c) 你 认为 P{Y = 站 (i = 0,1,…,n) 的 值 是 多 少 ? 
(d) 用 反 向 归纳 法 验证 你 对 于 (c) 的 回答 . 即 在 上 = m 时 验证 你 的 回答 是 正确 , 然后 证 明 ， 
只 要 它 对 大 正确 , 就 对 上 一 1 也 正确 , 上 = 1,…,n. 


. 足球 队 A 的 对 手 有 两 种 类 型 : 类 型 1 和 类 型 2 队 A 对 类 型 i 对 手 的 得 分 进 球 数 是 均值 


为 Xi 的 泊 松 随机 变量 , 此 处 和 1 = 2, 和 2 = 3. 本 周末 该 队 有 两 次 与 他 们 并 不 熟悉 的 队 的 比 
赛 . 假定 与 他 们 比赛 的 第 一 队 为 类 型 1 的 概率 是 0.6, 而 第 二 队 与 第 一 队 的 类 型 独立 , 且 为 
类 型 1 的 概率 是 0.3, 确定 

(a) 本 周末 队 A 得 分 的 进 球 数 的 期 望 ; 

(b) 队 A 总 共 进 5 个 球 的 概率 . 

连续 地 抛 毛 正 面 朝 上 的 概率 为 p 的 一 枚 硬币 , 以 P;(n) 记 在 前 n 次 抛掷 中 出 现 连续 j 个 
正面 的 一 个 连贯 的 概率 . 


(a) 论证 
Pln)=P(n-D+r( -Ph -P(rn-i—1)] 
(b) 通过 取 条 件 于 出 现 首 个 非 正 面 , 推导 将 户 (mn) 与 量 户 (n 一 上 (= 1,…,j) 联系 起 来 
的 另 一 个 方程. 


在 一 个 有 2" 个 竞赛 选手 的 网 球 锦标 赛 中 , 选手 配 成 对 比赛 输 的 选手 出 局 , 余下 的 2"… 
个 选手 又 配 成 对 比赛 .这样 继续 n 轮 , 只 有 一 个 选手 未 被 击败 时 ,他 就 是 赢 的 人 . 假设 竞赛 
选手 编号 为 1 到 2", 而 且 只 要 两 个 选手 比赛 , 标号 小 的 选手 以 概率 p 取胜 ， 再 假设 余下 选 
手 的 配对 总 是 随机 的 , 致使 在 该 轮 中 所 有 可 能 的 配对 都 是 等 可 能 的 . 

(a) 选手 1 说 得 锦标 赛 的 概率 是 多 少 ? 

(b) 选手 2 赢得 锦标 赛 的 概率 是 多 少 ? 

提示 : 假设 随机 配对 在 锦标 赛 前 完成 . 即 第 一 轮 配对 是 随机 确定 的 , 2" 个 第 一 轮 的 配对 
是 随机 成 对 的 , 每 对 中 赢 的 选手 进入 第 二 轮 比赛 , 这 2"? 组 (每 组 4 个 选手 ) 随机 成 对 , 每 
组 中 启 的 选手 进入 第 三 轮 比赛 , 如 此 等 等 . 选手 i 与 选手 j 称 为 按 进度 在 第 上 轮 中 相遇 , 倘 
使 他 们 都 启 得 第 太一 1 轮 比赛 , 他 们 将 在 第 上 轮 中 相遇 . 现在 对 选手 1 与 选手 2 按 进度 相 
过 那 一 轮 的 序数 取 条 件 . 

在 匹配 问题 中 , 我 们 说 (i,j)(i < j) 成 对 , 如 果 i 选取 j 的 帽子 , 而 且 j 选取 ; 的 帽子 . 

(a) 求 成 对 个 数 的 期 望 

(b) 以 Qn 记 没有 成 对 的 概率 . 推导 一 个 用 Q;(j < n) 表示 Qn 的 递 推 公式 . 

提示 : 用 循环 概念 . 

(c) 用 (b) 中 的 递 推 公式 求 Qs. 

以 NN 记 匹配 问题 结果 中 循环 的 个 数 . 

(a) 令 Mn = E[N], 推导 一 个 用 M1,…, Mn-1 表示 Mn 的 方程. 

(b) 以 Ci 记 含有 7 的 循环 的 长 度 . 证 明 


N= Fc 
气 


并 用 前 面 的 结果 确定 ELN]. 
(©) 求 标记 1,2,… ,上 的 人 都 在 同一 个 循环 中 的 概率 . 
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(d) 求 1,2,…,k 是 一 个 循环 的 概率 . 
用 方程 (3.13) 得 到 方程 (3.9). 
提示 首先 在 方程 (3.13) 两 边 乘 以 n. 然后 写 下 一 个 由 n 一 1 代替 n 的 新 方程 , 并 从 后 者 
中 减 去 前 者 . 
在 例 3.28 中 , 证 明 在 给 定 U1 = y 时 NN 的 条 件 分 布 与 在 给 定 = 1 一 y 时 M 的 条 件 分 
布 相同 , 再 证 明 4 

EINIUi = 避 =EIMID =1—y=1+e’ 
假设 我 们 连续 地 掷 一 颗 人 般 子 直至 所 有 掷 出 的 点 数 之 和 超过 100. 当 你 停止 时 总 和 最 可 能 是 
多 少 ? 
有 5 个 部 件 . 它们 都 独立 地 工作 , 部 件 i 工作 的 概率 为 pi,i = 1, 2, 3,4, 5. 这 些 部 件 构成 一 
个 系统 , 如 图 3.7 所 示 . 
系统 称 为 在 工作 , 如 果 在 图 中 左 端 产生 的 信号 能 到 达 右 端 , 其 中 它 能 通过 一 个 部 件 仅 当 此 部 
件 在 工作 .( 例 如, 如果 部 件 1 和 4 都 工作 , 系统 也 工作 .) 系统 工作 的 概率 是 多 少 ? 


图 3.7 
本 问题 介绍 例 3.27 的 选票 问题 的 另 一 个 证 明 . 
(a) 论证 
Pnm 二 1 一 P{A 和 B 在 某 点 成 平局 }. 
(b) 解释 为 什么 


P{A 接受 第 一 张 选票 , 而 且 他 们 最 终 成 平局 } 
= P{B 接受 第 一 张 选票 , 而 且 他 们 最 终 成 平局 }. 


提示 : A 接受 第 一 张 选 票 并 且 他 们 最 终 成 平局 的 任意 一 个 结果 , 对 应 于 B 接受 第 一 张 选 票 
且 他 们 最 终 成 平局 的 一 个 结果 . 解释 这 个 对 应 . 

(e) 论证 P{ 最 终 成 平局 }= 2m/(n 十 m), 并 由 此 得 出 已 ,mm = 人 一 mm)/m 二 mm) 
考虑 一 个 赌 徒 , 每 次 下 注 他 赢 1 美元 的 概率 为 18/38, 输 1 美元 的 概率 为 20/38 (如 果 下 注 
于 轮 盘 赌 , 它们 正 是 停 在 一 种 特定 的 颜色 的 概率 ). 这 个 赌 徒 在 赢得 总 数 5 美元 或 财 100 次 
时 离开 . 问 他 恰好 赌 15 次 的 概率 是 多 少 ? 

证 明 

(a) EIXY|Y =y] =yE[XIY = 

(b) Elg(X,Y)IY =y] = Elg(X,W)IY = 

(©) E[XY] = E[YE[XIY]] 

在 选票 问题 ( 例 3.27) 中 , 计算 P{A 从 没有 落后 }. 
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79. 


80. 


81. 


82. 


83. 


从 一 个 有 个 白 球 和 m 个 黑 球 的 丛 中 , 每 次 取出 一 个 . 如 果 n > m, 证 明 管 中 白 球 总 多 于 
黑 球 (当然 , 到 人 管 空 为 止 ) 的 概率 等 于 (n 一 m)/(n 十 m). 解释 为 什么 这 个 概率 等 于 取出 的 
球 的 集合 中 总 包含 白 球 多 于 黑 球 的 概率 . (由 选票 问题 , 后 者 正 是 (n 一 m)/(n 十 m)). 

连续 地 抛掷 一 枚 出 现 正面 的 概率 为 p 的 硬币 n 次 . 从 第 一 次 抛 据 开 始 , 出 现 的 正面 数 总 比 
反面 数 多 的 概率 是 多 少 ? 

令 Xil(i> 1) 是 独立 的 (0, 1) 均匀 随机 变量 , 定义 N 为 


N = min{n: Xn < Xn 


其 中 Xo = zx. 令 f(z) = E[N]. 

(a) 通过 取 条 件 于 Xi, 导出 f(z) 的 一 个 积分 方程 . 

(b) 对 (a) 中 导出 的 方程 两 边 取 微 商 . 

(c) 求解 (b) 中 得 到 的 方程. 

(d) 对 于 确定 f(z) 的 第 二 种 途径 , 论证 

PIN> 月 = 人 = 东 一 
(下 


(e) 利用 (d) 得 到 f(z). 
令 1,X2，,… 是 独立 的 连续 随机 变量 , 具有 同样 的 分 布 函数 下 和 分 布 密度 / = F", 并 且 


对 k>1 令 
Nk = min{n > 上: Xn = X1,… ,Xn 中 第 大 个 大 的 } 


(a) 证 明 P{Nk =n} = (一 DVIn(n 一 1)],n>k. 
(b) 论证 Ve 

Jxw(z) = f(z)(F(z)):—! D ( 了 习 (F(a))' 

i=0 

(0) 证 明 下 述 恒等式 

al -oo 0<a<lk>2 
提示 : 用 归纳 法 . 当 大 = 2 时 先 证 明 它 , 而 后 假定 它 对 于 大 正确 . 对 于 上 十 1 时 , 为 证 明 它 
成 立 , 利用 
D3 (a-o -六 (ja-or+ 癸 (F790 


i=1 i=1 


m m=1 到 一 1 
全 -人 
现在 , 用 归纳 法 假设 给 上 面 的 方程 的 右边 的 第 一 项 赋值 . 
(d) 最 后 得 到 结论 Xv。 具有 分 布 FF. 
一 个 管 中 含 有 n 个 球 , 球 i 有 重量 wi,i = 1,…,n， 按 以 下 的 方案 从 伟 中 每 次 取出 一 
个 : 当 3 是 余下 的 球 的 集合 时 , 下 一 次 以 概率 wi/ 并 ;es wi 取出 球 ii E 5. 求 在 取出 球 
i(i = 1,…,u) 之 前 , 取出 的 球 的 期 望 个 数 . 


其 中 上 面 用 了 组 合 恒等式 


84. 


85. 


87. 


88. 


89. 


90. 
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.假设 例 3.32 的 对 打 中 , 赢家 只 在 发 球 时 才 赢得 一 个 点 . 

(a) 若 目前 由 4 发 球 , 问 4 赢得 下 一 个 点 的 概率 是 多 少 ? 

(b) 解释 如 何 得 到 最 终 记 分 的 概率 . 

在 列表 问题 中 , 当 P; 都 已 知 时 , 证 明 最 佳 排序 (在 所 需求 的 元 素 的 位 置 的 期 望 最 小 的 意义 
下 为 最 佳 ) 是 按 它们 的 概率 递减 地 配置 元 素 . 即 若 P > 书 > … > Pn, 证明 1,2,…,n 就 
是 最 佳 排序 . 1 

. 当 n = 5 时 , 考察 3.6.2 节 的 随机 图 . 计算 连通 分 量 个 数 的 概率 分 布 , 并 用 它 计算 E[C], 然 


后 将 你 的 解答 与 
k—1)! 
sa- 站 的 时 


比较 , 以 此 验证 你 的 解答 . 
(a) 由 3.6.3 节 的 结果 , 我 们 可 以 得 到 方程 z1 十 .… 十 zm = nn 共有 (人 全 个 非 


m-—1 
负 整数 解 的 结论 . 直接 证 明 此 结论 . 
(b) 方程 1 十 … 十 Zm = n 共有 多 少 个 正 整 数 解 ? 
提示 , 令 yi = zi 一 | 
(e) 对 于 博 斯 - 爱 因 斯 坦 分 布 , 计算 恰 有 大 个 Xi 等 于 0 的 概率 . 
在 3.6.3 节 中 我 们 看 到 , 如 果 U 是 一 个 (0, 1) 均匀 随机 变量 , 而且 如 果 在 条 件 U = p 下 ， 
X 是 一 个 参数 为 (n,p) 的 二 项 随机 变量 , 那么 


P(X = = i=0,l,,n 


对 于 另 一 个 证 明 此 结果 的 方法 , 令 以 X1,X2,…, Xn 是 独立 的 (0, 1) 均匀 随机 变量 . 定义 


义 为 
X=#i: Xi<UD 
即 车 将 此 n 十 1 个 变量 由 小 到 大 排序 , 那么 U 将 在 位 置 X 十 1. 
(a) P(X = 引 ) 是 多 少 ? 
(b) 解释 这 如 何 证 明了 3.6.3 节 的 上 述 结论 . 
令 贱 ,…, In 是 独立 随机 变量 , 它们 中 的 每 个 都 等 可 能 地 取 0 或 1. 一 个 著名 的 非 参 数 统 
计 检 验 ( 称 为 符号 秩 检 验 ) 是 有 关于 确定 由 


Pa(k) = {2 < 
气 
定义 的 Pn(k). 验证 如 下 的 公式 : 
Ps(k) = BP (lh) + 了 PK —n) 
在 每 个 时 段 出 现 的 事故 次 数 是 一 个 均值 为 5 的 泊 松 随机 变量 . 令 Xn(n > 1) 等 于 第 nn 个 
时 段 中 的 事故 数 , 求 ELN], 其 中 
(a) N = minfn: Xn -az=2Xn =1Xn=0}， 
(b) N = minfn: Xn-3 = 2, Xn_2 = 1, Xn_1 = 0, Xn = 2}. 


@ 式 中 # 表示 i 的 个 数 .一 一 编者 注 
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91. 


92. 


“93. 


94. 


95. 


96. 


对 于 一 枚 出 现 正面 的 概率 为 p 的 硬币 , 求 得 到 模式 “ 正 , 反 , 正 , 正 , 反 , 正 , 反 , 正 ”所 需 抛 
掷 的 次 数 的 期 望 ， 
乔 希 在 上 班 路 上 看 到 硬币 的 数目 是 均值 为 6 的 泊 松 随机 变量 . 每 个 硬币 等 可 能 地 是 1 分 、5 
分 、10 分 或 25 分 . 乔 希 捡 起 除 一 分 币 外 的 其 他 硬币 . 
(a) 求 乔 希 上 班 途中 捡 起 钱 的 总 值 的 期 望 . 
(b) 求 乔 希 上 班 途中 捡 起 钱 的 总 值 的 方差 
(c) 求 乔 希 上 班 途中 捡 起 钱 的 总 值 恰 为 25 分 的 概率 . 
考察 一 系列 独立 试验 , 每 个 试验 的 结果 等 可 能 地 为 0, 1,.…,m 中 的 任意 一 个 . 第 一 轮 开始 
于 第 一 个 试验 , 而 新 的 一 轮 于 每 次 出 现 结果 0 时 开始 . 以 N 记 直至 结果 1,…,m 一 1 都 出 
现在 同一 轮 时 的 试验 次 数 . 再 以 Ty 记 直至 j 个 不 同 结果 出 现 的 试验 次 数 , 而 以 1; 记 出 现 
的 第 7 个 不 同 结果 . (所 以 结果 I 首次 出 现 于 试验 T.) 
(a) 论证 随机 向 量 ( 卫 ,… ,Im) 与 (Ti,……,Tm) 是 独立 的 . 
(b) 如 果 结 果 0 是 出 现 的 第 j 个 不 同 结果 , 则 令 X = j, 如 此 定义 了 X( 故 Ix = 0). 通过 
取 条 件 于 X, 导出 一 个 用 E[](j = 1,…,m 一 1) 表示 EIN] 的 方程 
(c) 确定 E[ZT] =1,…,m 一 1. 
提示 : 参见 第 2 章 习题 42. 
(d) 求 EIN]. 
令 N 是 超 几 何 随机 变量 , 具有 在 w 个 白 球 和 b 个 蓝 球 的 一 个 集合 中 选取 的 样本 量 为 7 的 
一 个 随机 样本 中 白 球 的 个 数 的 分 布 . 即 


Gi 


其 中 我 们 用 了 当 j < 0 或 了 >m 时 人 = 0 的 约定 ， 现 在 , 考虑 一 个 复合 随机 变量 


SN = 并 人 ,Xi 其 中 Xi 是 正 整数 值 随机 变量 , 具有 oj = P{Xi = 让). 

(a) 用 3.7 节 中 定义 的 M, 求 M 一 1 的 分 布 . 

(b) 抑制 它 对 于 5 的 依赖 性 , 令 Per(b) = P{Sw = 月 , 对 Pr(k) 推导 一 个 递 推 方程 
(e) 用 (b) 中 的 递 推 式 求 Per(2). 

对 于 3.6.6 节 不 带 左 跳 的 随机 徘徊 , 令 6 = P{S。< 0, 对 所 有 的 n} 表示 这 个 随机 徘徊 从 
不 为 正 的 概率 . 当 ELXi] < 0 时 求 B. 

考虑 家 庭 这 个 大 总 体 , 假定 不 同 家 庭 中 孩子 的 数量 是 均值 为 和 的 独立 的 泊 松 随机 变量 .证 
明 : 随机 地 选择 一 个 孩子 , 其 兄弟 姐妹 的 数量 也 是 均值 为 和 的 泊 松 随机 变量 . 


"97. 用 条 件 方差 公式 求 几 何 随机 变量 的 方差. 


“98. 
“99. 


对 复合 随机 变量 S = 六 Xi, 求 Cov(N, 5). 
独立 试验 每 次 成 功 的 概率 为 p, 其 在 相继 的 上 次 成 功 时 的 试验 次 数 记 为 N. 
(a) P{N = 上} 是 什么 ? 
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(b) 论证 
P(N=k+7r)=P(N >r—1)gp", r>0 
(c) 证 明 
1—p* = gp*E[N] 


第 4 章 ”马尔 可 夫 链 


4.1 引 言 


考虑 在 每 个 时 间 段 有 一 个 值 的 随机 过 程 . 令 Xn 表示 它 在 时 间 段 n 的 值 , 假设 
我 们 要 对 一 系列 相继 的 值 Xo, X1, X2,… 建立 概率 模型 . 最 简单 的 模型 可 能 就 是 假 
设 Xn(n = 0,1,2,…) 是 独立 的 随机 变 基 , 但 这 个 假设 常常 是 不 合理 的 . 例如 , 从 某 
个 时 刻 开始 Xn 代表 某 种 股票 (例如 Google) 在 未 来 n 个 交易 日 末 的 价格 . 若 假定 
在 第 n+1 个 交易 日 末 的 价格 与 第 n,n 一 1,n 一 2,…,0 日 的 价格 独立 , 这 显然 是 不 
合理 的 . 然而 , 若 假定 第 n+ 1 个 交易 日 末 的 价格 通过 第 n 日 末 的 价格 依赖 于 以 前 
的 盘 后 价格 , 这 可 能 是 合理 的 . 也 就 是 说 , 给 定 以 前 的 盘 后 价格 Xn, Xa-1,…, Xo 时 
Xn+t1 的 条 件 分 布 只 通过 第 n 个 交易 日 末 的 价格 依赖 于 以 前 的 这 些 盘 后 价格 . 这 种 
假设 就 定义 了 一 个 马尔 可 夫 链 , 这 是 本 章 将 要 研究 的 一 种 随机 过 程 , 现在 我 们 正式 
地 定义 它 . 

令 {Xn,n = 0,1,2,…} 是 有 限 个 值 或 者 可 数 个 可 能 值 的 随机 过 程 . 除非 特别 
提醒 , 这 个 随机 过 程 的 可 能 值 的 集合 都 将 记 为 非 负 整数 的 集合 {0,1,2,…}， 如 果 
Xn = i, 那么 称 该 过 程 在 时 刻 t 在 状态 i. 我 们 假设 只 要 过 程 在 状态 i, 就 有 一 个 固定 


的 概率 Pij 使 它 在 下 一 个 时 刻 在 状态 j. 即 我 们 假设 对 于 一 切 状态 ioi，…,in-ui 
及 一 切 n>0, 有 
P{Xn+l = Jj|Xn =i, Xn = 加 -1 ,Xi1 =i, Xo=io}=P (4.1) 


这 样 的 随机 过 程 称 为 马尔 可 夫 链 . 方程 (4.1) 可 以 解释 为 , 对 于 一 个 马尔 可 夫 链 , 在 
给 定 过 去 的 状态 Xo, X1,…, Xn-1 和 现在 的 状态 X， 时 , 将 来 的 状态 Xn+1 的 条 件 
分 布 独立 于 过 去 的 状态 , 且 只 依赖 于 现在 的 状态 . 

Pi; 表示 过 程 处 在 状态 i 时 下 一 次 转移 到 状态 j 的 概率 . 由 于 概率 都 是 非 负 的 ， 
又 由 于 过 程 必须 转移 到 某 个 状态 , 所 以 有 


Pi>0, ii20; DPj=1, i=0,1,.… 


以 王 记 一 步 转移 概率 Pi; 的 矩阵 , 所 以 
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例 4.1( 天 气 预报 ) ”假设 明天 下 雨 的 机 会 只 依赖 于 前 一 天 的 天 气 条 件 , 即今 天 是 否 
下 雨 , 而 不 依赖 过 去 的 天 气 条 件 . 再 假设 如 果 今 天 下 雨 , 那么 明天 下 雨 的 概率 为 a; 
如 果 今 天 没有 下 雨 , 那么 明天 下 雨 的 概率 为 8. 
如 果 下 雨 , 我 们 假定 过 程 在 状态 0; 如 果 不 下 雨 , 我 们 假定 过 程 在 状态 1. 那么 ， 
上 面 的 内 容 是 一 个 两 个 状态 的 马尔 可 夫 链 , 其 转移 概率 矩阵 给 定 为 
P= | a 1—@ | 
B 1-P 
例 4.2( 通 信 系统 ) ”考察 一 个 传送 数字 0 和 1 的 通信 系统 . 每 个 数字 的 传送 必须 经 
过 几 个 阶段 , 在 每 个 阶段 有 一 个 概率 p 使 进入 的 数字 在 离开 时 不 改变 . 以 Xn 记 第 
n 个 阶段 进入 的 数字 , 则 {Xn,n = 0,1,2,…} 是 一 个 两 个 状态 的 马尔 可 夫 链 , 具有 


P= | . | 图 
l-p 了? 


例 4.3 ”在 任意 给 定 的 一 天 , 加 里 的 心情 或 者 是 快乐 的 (cheerful, C), 或 者 是 一 般 
的 (so-so, S), 或 者 是 忧郁 的 (glum, G). 如 果 今 天 他 是 快乐 的 , 则 明天 他 分 别 以 概率 
0.5,0.4,0.1 是 C, S, G. 如 果 今 天 他 感觉 一 般 , 则 明天 他 分 别 以 概率 0.3,0.4,0.3 为 C， 
S, G. 如 果 今 天 他 是 忧郁 的 , 则 明天 他 分 别 以 概率 0.2,0.3,0.5 为 C, S, G. 

以 Xn 记 加 里 在 第 ”天 的 心情 , 则 {Xn,n > 0} 是 一 个 三 个 状态 的 马尔 可 夫 链 
(状态 0 = C, 状态 1 = 5, 状态 2 = G), 具有 转移 概率 矩阵 
0.5 0.4 0.1 
0.3 0.4 0.3 
0.2 0.3 0.5 


例 4.4( 将 一 个 过 程 转变 为 马尔 可 夫 链 ) ”假设 今天 是 否 下 雨 依赖 于 前 两 天 的 天 气 
条 件 . 特别 地 , 假设 如 果 过 去 的 两 天 都 下 雨 , 那么 明天 下 雨 的 概率 为 0.7; 如 果 今天 
下 雨 , 但 昨天 没有 下 雨 , 那么 明天 下 雨 的 概率 为 0.5; 如 果 昨 天 下 雨 , 但 今天 没有 下 
雨 , 那么 明天 下 雨 的 概率 为 0.4; 如 果 过 去 的 两 天 都 没有 下 两 , 那么 明天 下 雨 的 概率 
为 0.2. 


P= 
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如 果 假 设 在 时 间 n 的 状态 只 依赖 于 在 时 间 n 是 否 下 雨 , 那么 上 面 的 模型 就 不 
是 一 个 马尔 可 夫 链 (为 什么 不 是 ). 然而 , 我 们 可 以 通过 假定 在 任意 时 间 的 状态 是 由 
这 天 与 前 一 天 的 天 气 条 件 共同 确定 , 将 上 面 的 模型 转变 为 一 个 马尔 可 夫 链 . 换 句 话 
说 , 我 们 可 以 假定 过 程 处 在 

状态 0: 如 果 今 天 和 昨天 都 下 雨 . 状态 1: 如 果 今 天 下 雨 , 但 昨天 没有 . 

状态 2: 如 果 昨 天 下 雨 , 但 今天 没有 . 状态 3: 如 果 今 天 和 昨天 都 没有 下 两 . 
前 面 的 内 容 就 表示 一 个 4 个 状态 的 马尔 可 夫 链 , 具有 转移 概率 矩阵 


07 0 03 0 
0.5 0 0.5 0 
0 04 0 0.6 
0 02 0 0.8 


你 应 该 仔细 地 检查 矩阵 已, 以 确保 你 真正 明白 了 它 是 怎样 得 到 的 . a 
例 4.5( 随 机 游 动 模型 ) 一 个 状态 空间 是 由 整数 i = 0, 圭 1, 土 2,… 给 出 的 马尔 可 夫 
链 称 为 随机 游 动 , 如 果 对 于 某 个 数 0<p< 1， 


Pin=p=1- Pi i=0,+l,.… 


上 面 的 马尔 可 夫 链 之 所 以 称 为 随机 游 动 , 是 因为 我 们 可 以 将 它 想 成 一 个 人 在 直线 上 
行走 , 他 在 每 一 个 时 间 点 以 概率 p 向 右 走 一 步 , 或 者 以 概率 1 一 p 向 左 走 一 步 。 图 
例 4.6( 赌 博 模 型 ) 考察 一 个 赌 徒 , 在 每 局 中 赢 1 美元 的 概率 为 p, 输 1 美元 的 概率 
为 1 一 p. 如 果 我 们 假设 他 在 破产 时 或 者 在 财富 达到 N 美元 时 离开 , 那么 赌 徒 的 财 
富 是 一 个 马尔 可 夫 链 , 具有 转移 概率 


Pirni=p=1-Pii, i=1,2,,N-1, Po=Pw=1 


状态 0 和 N 称 为 吸收 态 , 因为 一 旦 进入 此 状态 , 它们 就 不 再 离开 . SN 
个 具有 了 吸收 壁 (状态 0 和 N) 的 有 限 状态 的 随机 游 动 . 
例 4.7 ”欧洲 和 亚洲 的 绝 大 部 分 汽车 年 保险 金 是 由 所 谓 好 - 坏 系统 确定 的 . 和 
保 人 被 赋予 一 个 否 整 数值 的 状态 , 而 年 保险 金 是 该 状态 的 一 个 函数 (当然 , 要 根据 保 
险 的 是 什么 类 型 的 车 及 保险 的 水 平 ). 参 保 人 的 状态 随 着 参 保 人 要 求 理赔 的 次 数 一 
年 一 年 地 变化 . 因为 低 的 状态 对 应 于 低 的 年 保险 金 , 如 果 参 保 人 在 上 一 年 没有 理赔 
要 求 , 他 的 状态 就 将 降低 , 而 如 果 参 保 人 在 上 一 年 至 少 有 一 次 理赔 要 求 , 他 的 状态 一 
般 会 增加 . (所 以 , 无 理赔 是 好 的 , 并 且 一 般 会 导致 低 保险 金 , 而 要 求 理赔 是 坏 的 , 一 
般 会 导致 更 高 的 保险 金 .) 

对 于 给 定 的 一 个 好 - 坏 系统 , 以 si(k) 记 一 个 在 上 一 年 处 在 状态 i 且 在 该 年 有 上 
次 理赔 要 求 的 参 保 人 在 下 一 年 的 状态 如果 我 们 假设 一 个 特定 的 参 保 人 年 理赔 要 


P= 
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求 的 次 数 是 参数 为 和 的 泊 松 随机 变量 , 那么 此 参 保 人 相继 的 状态 将 构成 一 个 马尔 可 
夫 链 , 具有 转移 概率 Xk 
Pj;= > ei j>0 
k:si(k)=j 
然而 通常 有 很 多 状态 (20 个 左右 并 不 是 非典 型 )， 下 表 详 细 说 明了 一 个 假设 有 4 
个 状态 的 好 - 坏 系 统 . 


下 一 个 状态 
0 个 理赔 1 个 理赔 2 个 理赔 3 个 理财 以 上 
2 3 4 


状态 年 保险 金 
200 
250 


3 4 4 
400 2 4 4 4 
600 3 4 4 4 
因此 , 例如 , 此 表 说 明了 s2(0) = 1; s2(1) = 3; s2(k) = 4,k > 2. 考察 年 理赔 次 数 是 参 


数 为 和 的 泊 松 随机 变量 的 一 个 参 保 人 . 如 果 这 样 的 参 保 人 一 年 中 有 次 理赔 要 求 
的 概率 为 ok, 那么 


四国 加 


Es 


Gg 一 om k>0 
对 于 上 表 说 明 的 好 - 坏 系统 , 参 保 人 相继 的 状态 的 转移 概率 矩阵 是 
ao al aa 1 一 ao 一 al 一 a2 
P= ao 0 a 1--ao 一 al 
|o oo0 1-oo 


0 0 ao 1l-ao 
4.2  C-K 方程 
我 们 已 经 定义 了 一 步 转移 概率 已 ij. 现在 我 们 定义 n 步 转移 概率 P 为 处 于 状 
态 i 的 过 程 将 在 n 次 转移 后 处 于 状态 j 的 概率 . 即 
PS=P{Xayy = j|Xh = 72080720 
当然 已 = Pij. C-K 方程 ( 查 普 受 - 科 尔 英 苞 罗 夫 方程) 提供 了 计算 n 步 转移 概率 
的 一 个 方法 . 这 些 方程 是 
= Din, 对 于 一 切 n,m>0, 一 切 i,j (4.2) 


这 很 容易 理解 ， 只 要 注意 到 有 PR 表示 , 通过 一 条 第 n 次 转移 处 于 状态 上 的 道路 ， 
开始 处 在 状态 i 的 过 程 经 过 n +m 次 转移 至 状态 j 的 概率 . 因此 , 对 所 有 的 中 间 状 
态 太 求 和 就 得 到 这 个 过 程 在 n +m 次 转移 后 处 于 状态 j 的 概率 . 正式 地 , 我 们 有 
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Pot™ =P{Xstm =j|Xo = 
梳 
= DP{Xntm =%Xn 下 |Xo= 计 
k=0 


上 
= P{Xntm=jlXn= 久 Xo=i 计 P{Xn=AXo= 计 
k=0 


= 2 PBPn 
k=0 
如 果 我 们 以 PW" 记 n 步 转移 概率 PS 的 矩阵 , 那么 方程 (4.2) 表明 
Ptm) ~ p(n . p(™) 

其 中 中 间 的 点 表示 矩阵 的 乘法 .9 因此 , 特别 地 

P®?) i PU+D) =P.P= 也 2 
而 由 归纳 法 

Po) = Po-1+0 -= Pn-1.P -= Pn 
即 n 步 转移 概率 矩阵 可 以 由 PP 自 乘 ”次 得 到 . 
例 4.8 在 例 4.1 中 ,天 气 被 认为 是 两 个 状态 的 马尔 可 夫 链 . 如 果 a = 0.7 且 6=0.4， 
那么 假定 今天 下 雨 , 计算 今天 往 后 的 4 天 都 下 雨 的 概率 . 
解 ”一 步 转移 概率 矩阵 为 
| 0.7 0.3 | 
0.4 0.6 


因此 
pw pr [07 03][07 03]_ Foo 039 
0.4 0.6 | | 04 0.6 0.52 0.48 | 
pW (py -| 061 039 | | 061 039 | -| 05749 04251 
0.52 0.48 | | 0.52 0.48 0.5668 0.4332 
而 要 求 的 概率 Fi 等 于 0.5749. a 


例 4.9 ”考察 例 4.4, 已 知 星期 一 与 星期 二 下 雨 , 问 星期 四 下 雨 的 概率 是 多 少 ? 
解 ”两 步 转移 概率 矩阵 为 


@ 若 义 是 一 个 N x M 矩阵 ,其 让 行列 的 元 素 是 aij, 而 妃 是 一 个 MxK 矩阵 , 其 i 行 了 列 的 元 索 是 
bij, 那么 AA. 互 定义 为 一 个 N x K 矩阵 , 其 之 行 了 了 列 的 元 素 是 并 MLi askbkj- 
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05 0 05 0 05 0 0.5 0 
0.4 0 0.4 0 0.6 
0 02 0 0.2 0 0.8 


0.49 0.12 0.21 0.18 

0.35 0.20 0.15 0.30 

0.20 0.12 0.20 0.48 

0.10 0.16 0.10 0.64 
由 于 星期 四 下 十 等 价 于 星期 四 处 在 状态 0 或 状态 1 的 过 程 , 所 求 的 概率 由 P% 十 
P& = 0.49 + 0.12 = 0.61 给 出 . 国 
例 4.10 ”在 管 中 总 含有 两 个 球 . 球 的 颜色 有 红色 与 蓝 色 . 每 个 时 期 随机 地 取出 一 
个 球 , 并 且 放 回 一 个 新 球 , 新 球 的 颜色 以 0.8 的 概率 与 取 的 球 同色 , 而 以 0.2 的 概率 
为 相反 的 颜色 . 如 果 开 始 时 两 个 球 都 是 红色 , 求 第 五 次 取 到 的 球 是 红色 的 概率 . 
解 ” 为 了 求 得 所 要 的 概率 , 我 们 首先 定义 一 个 合适 的 马尔 可 夫 链 . 只 要 注意 取 到 红 
球 的 概率 是 由 选取 时 丛 中 的 成 分 所 确定 , 就 完成 了 这 个 链 的 定义 . 所 以 , 我 们 将 X， 
定义 为 经 过 n 次 抽取 和 随后 的 放 回 后 伟 中 的 红 球 个 数 . 那么 {X,n > 0} 是 一 个 以 
0,1,2 为 状态 的 马尔 可 夫 链 , 而 且 转 移 矩阵 已 由 
0.8 02 0 
0.1 0.8 0.1 
0 0.2 0.8 


给 定 . 为 了 理解 上 式 , 我 们 考虑 Pi,o. 现在 , 丛 中 从 1 个 红 球 变 为 0 个 红 球 , 这 表明 已 
取出 的 球 必定 是 红 球 ( 它 以 0.5 的 概率 发 生 ), 同时 必须 放 回 一 个 相反 颜色 的 球 ( 它 
以 0.2 的 概率 发 生 ), 这 说 明 

Pio = (0.5)(0.2) = 
为 了 确定 第 五 次 取出 的 球 是 红色 的 概率 , 我 们 对 第 四 次 选取 并 放 回 后 念 中 的 红 球 个 
数 取 条 件 . 这 就 得 到 


二 
P( 第 五 次 取 到 的 是 红 球 ) = 》`P( 第 五 次 取 到 的 是 红 球 |X4 = i)P(X4 = ilXo = 2) 
i=0 


=(0)P#o + (0.5)PE1 + (1)P#, 
=0.5Pz1 + P22 


07 0 03 0 07 0 03 0 
了 0) = PP2 = 


为 了 计算 上 式 , 我 们 计算 已 :. 这 样 做 后 就 得 到 
Pi = 0.4352， P#, = 0.4872 
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从 而 给 出 答案 P( 第 五 次 取 到 的 是 红 球 )=0.7048 mn 
例 4.11 ”假定 球 逐 个 地 被 分 配 到 8 个 倪 中 , 各 球 以 相等 的 可 能 放 到 其 中 任意 一 个 
倪 中 . 问 在 分 配 9 次 后 , 其 中 恰 有 3 个 瓮 不 是 空 的 概率 是 多 少 ? 

解 ”如果 我 们 以 X" 记 第 ”个 球 被 分 配 后 非 空 念 的 数目 , 那么 {Xn,n > 0} 是 一 个 
以 0,1,…,8 为 状态 的 马尔 可 夫 链 , 其 转移 概率 为 


Pi=i/8=1— Pui, 1 一 01 8 


所 要 求 的 概率 是 Ps = P83, 其 中 的 等 号 是 因为 Po = 1. 现在 从 1 个 非 空 的 管 
开始 , 如 果 想 要 确定 在 附加 的 8 次 分 配 后 非 空 念 的 数目 的 整个 概率 分 布 , 我 们 需要 
对 状态 1,2,…,8 考察 转移 概率 矩阵 . 然而 , 由 于 从 一 个 非 空 的 念 开始 , 我 们 需要 求 
在 附加 的 8 个 球 被 分 配 后 有 3 个 非 空 的 侈 的 概率 , 这 时 我 们 可 以 利用 , 将 所 有 的 状 
态 4,5,…,8 合成 单一 的 状态 4 时 , 即 只 要 四 个 或 更 多 的 管 非 空 则 状态 就 是 4 时 ， 
马尔 可 夫 链 的 状态 的 作用 不 会 减弱 这 一 事实 ?. 因此 , 我 们 只 需 确定 具有 4 个 状态 
1,2,3,4 并 且 转 移 概率 矩阵 PP 由 


be 
8 8 0 0 
2 6 
0 8 8 0 
3 5 
0 0 8 8 
0 0 1 


给 定 的 马尔 可 夫 链 的 8 步 转移 概率 P83. 将 上 述 矩阵 升 至 4 次 宏 , 推出 由 
0.0002 0.0256 0.2563 0.7178 
0 0.0039 0.0952 0.9009 
0 0 0.0198 0.9802 
0 0 0 1 
给 定 的 已 … 因此 
PFs 二 0.0002 x 0.2563 + 0.0256 x 0.0952 + 0.2563 x 0.0198 
十 0.7178 x 0 = 0.007 56 
考虑 一 个 具有 转移 概率 Pi; 的 马尔 可 夫 链 . 以 of 记 一 个 状态 的 集合 , 并 且 假 定 
我 们 想 求 此 马尔 可 夫 链 在 时 刻 m 前 曾经 进入 of 中 任意 一 个 状态 的 概率 . 也 就 是 ， 
对 于 给 定 的 状态 站 cg, 我 们 想 确定 
@ 请 读 考 注意 , 这 种 将 数 个 状态 合并 成 一 个 状态 的 方法 只 在 类 似 本 例 的 情形 才 正确 , 事实 上 , 在 本 例 中 


从 状态 上 只 能 转移 到 上 或 上 十 1. 对 于 一 般 的 马尔 可 夫 链 在 状态 合并 后 会 失去 马尔 可 夫 性 . 
译 者 注 
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B= 二 P(Xk e 1, 对 于 某 些 k=1,:…,m|Xo = 让 


为 了 确定 上 述 概率 , 我 们 定义 一 个 马尔 可 夫 链 {Wh,n > 0}, 其 状态 为 : 不 属于 of 
中 的 状态 外 加 一 个 附加 状态 , 在 我 们 一 般 的 讨论 中 称 其 为 状态 4( 虽 然 在 特定 的 例 
子 中 , 我 们 通常 会 用 不 同 的 称谓 ). 一 旦 马尔 可 夫 链 {Wn} 进入 状态 4 就 永远 保持 
在 其 中 . , 
这 个 新 的 马尔 可 夫 链 定义 如 下 . 以 X。 记 具 有 转移 概率 已, 的 马尔 可 夫 链 在 时 
刻 n 的 状态 , 定义 
N= min{n: Xn € of} 
而 且 如 果 对 一 切 都 有 Xn 4 7, 那么 令 N = oo. 简 言 之 , N 是 马尔 可 夫 链 首次 进 
入 状态 集 .xf 的 时 间 . 现在 定义 
_ Xn， 若 n<N 
Ver { A， 若 n>N 


所 以 , 直至 原来 的 马尔 可 夫 链 {Xn} 进入 of 中 的 某 个 状态 的 时 刻 前 , 过 程 {W} 的 
状态 等 于 原来 的 马尔 可 夫 链 的 状态 . 而 在 此 时 刻 新 过 程 到 达 状 态 4 并 且 永 远 保持 
于 此 . 从 此 描述 我 们 推出 {Wn,n > 0} 是 一 个 以 i(i ¢ of) 和 4 为 状态 的 马尔 可 夫 
链 , 其 转移 概率 Qiy 为 


Qij = Pij, 若 i jo 
Qia= Ps 若 i¢# 

je 
Qa,A=1 


因为 原来 的 马尔 可 夫 链 在 时 刻 m 前 进入 of 中 的 状态 , 当 且 仅 当 新 的 马尔 可 夫 链 在 
时 刻 m 的 状态 是 4, 由 此 我 们 看 到 


P(Xk € ,对 于 某 些 k=1,…,m|Xo = 让 
=P(Wm = 4|Xo =i) =P(Wm = AlWo =i) = Om 


也 就 是 , 所 要 的 概率 等 于 新 链 的 一 个 m 步 转移 概率 . 
例 4.12 ”在 一 系列 独立 抛掷 一 个 公平 硬币 的 试验 中 , 以 N 记 直至 出 现 连续 3 次 正 
面 时 的 抛掷 次 数 . 求 

(a) P(N < 8) 

(b) P(N = 8) 
解 (a) 为 了 确定 P(N < 8), 我 们 定义 一 个 具有 状态 0, 1, 2, 3 的 马尔 可 夫 链 , 其 中 
状态 i,i < 3 表示 目前 处 在 相继 正面 的 一 个 i 连贯 , 而 且 状 态 3 表示 一 个 3 次 连续 
正面 已 经 出 现 . 于 是 , 转移 概率 矩阵 是 
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1/2 1/2 0 0 

1/2 0 12 0 

1/2 0 0 12 
0 0 0 1 


其 中 , 例如 , 第 2 行 的 值得 自 , 注意 如 果 我 们 目前 在 大 小 为 1 的 连贯 , 若 下 次 抛掷 出 
现 反面 则 下 一 个 状态 是 0, 而 若 下 次 抛掷 出 现 正面 则 下 一 个 状态 是 2. 因此 Plo = 
已,2 = 1/2. 因为 当 且 仅 当 Xs = 3 时 在 前 8 次 抛掷 中 有 3 次 连续 正面 , 达到 这 要 求 
的 概率 是 P83. 求 已 的 平方 得 到 P?, 将 此 结果 平方 得 到 P, 然后 取 此 矩阵 的 平方 ， 
得 出 


五 = 


81/256 44/256 24/256 107/256 
68/256 37/256 20/256 131/256 
44/256 24/256 13/256 175/256 
0 0 0 1 
因此 , 在 前 8 次 抛掷 中 有 连续 3 次 正面 的 概率 是 107/256~~ 0.4180. 
(b) 得 到 在 前 8 次 抛掷 中 得 到 3 次 相继 正面 的 首 个 连贯 的 概率 的 一 个 方法 是 利 
用 


P= 


P(N=8)=P(N < 8)-P(N <7)= Ps,— Pls 
另 一 个 确定 P(N = 8) 的 方法 是 考虑 一 个 状态 为 0, 1, 2, 3, 4 的 马尔 可 夫 链 , 其 中 ， 
如 前 地 , 在 i < 3 时 , i 表示 我 们 目前 处 在 相继 正面 的 一 个 i 连贯 , 状态 3 表示 首 个 
大 小 为 3 的 连贯 刚 出 现 , 而 状态 4 表示 在 过 去 出 现 了 大 小 为 3 的 连贯 . 就 是 说 , 此 
马尔 可 夫 链 有 转移 概率 矩阵 
l/2 1/2 0 0 
l/2 0 1/2 0 
Q=|12 0 0 1/2 
0 0 0 0 
0 0 0 0 


如 果 从 状态 0 开始 经 过 8 次 转移 后 , 上 面 的 马尔 可 夫 链 在 状态 3, 则 N 将 等 于 8. 这 
就 是 说 , P(N = 8) = @8.3. 四 

对 于 马尔 可 夫 链 {Xn,n > 0}, 其 开始 时 处 于 状态 i, 假设 我 们 现在 想 求 它 在 时 
刻 m 进入 状态 了 而 且 从 没有 进入 of 中 的 任何 状态 的 概率 , 其 中 状态 i 和 j 都 不 属 
于 yf. 即 对 于 i4 of,j 4 9, 我们 想 求 

a=P(Xm=j,Xk ¢ A,k=1,.…,m— 1|Xo=1i) 

注意 到 事件 Xm = 万 Xk gf, 上 二 1，…,m 一 1 等 价 于 事件 Win = j, 可 以 推 知 , 对 
Fi¢ oH,j¢ 9, 


~~ooo0o 
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P(Xm =j,Xk ¢ A,k=1,...m—1|Xo =i) 
=P(Wm = jlXo =i)=P(Wm = jlWo=i) = Q® 
例 4.13 ”考虑 一 个 状态 为 1,2,3,4,5 的 马尔 可 夫 链 , 同时 假定 我 们 要 计算 
P(X4=2,X3 <2,X2 <2,X1 <2Xo0=1) ， 
也 就 是 , 我 们 要 计算 从 状态 1 出 发 , 在 时 刻 4 链 的 状态 是 2, 而 且 从 未 进入 过 集合 
of = {3,4,5} 的 概率 . 


为 了 计算 此 概率 , 我 们 需要 知道 的 仅仅 是 转移 概率 Pii, Piz, Pz1, P22， 所 以 , 我 


们 假定 
Pu1=03 Pa=0.3 Pa=0.1 P=0.2 


于 是 我 们 考虑 下 面 的 马尔 可 夫 链 它 具 有 状态 1, 2,3 (我们 将 状态 4 重 取 名 3) 和 如 
下 的 转移 概率 矩阵 Q: 
01 0.2 0.7 
0 0 1 
所 求 的 概率 是 Qt. 将 Q 升 至 4 次 军 , 得 到 
0.0219 0.0285 0.9496 | 


0.3 0.3 | 


0.0095 0.0124 0.9781 
0 0 1 


因此 , 所 求 的 概率 是 a = 0.0285. 国 
当 i# fj € of 时 , 我们 可 以 确定 概率 


a=P(Xm=j,Xk ¢ Ak=1,.…,m— 1|Xo=i) 


如 下 
a=D P(Xm=j Xm1=7 Xe ¢ A k=1,.,m— 2|Xo =i) 
人 ef 
= P(Xmn=jXm-1=7, Xe ¢ ,k=1,.,m—2, Xo=i) 
rgof 


xP(Xm-1=7, Xk ¢ A,k=1,..…,m—2|Xo=i) 


= DPrjP(Xm-1=7, Xk ¢ A,k=1,.…,m—2|Xo=) 
rg 


= PriQ8 
rgo 
再 者 , 当 ;ie of 时 , 我 们 可 以 确定 
Qa=P(Xm=jXk¢ A,k=1,.…,m—1|Xo =i) 
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为 此 只 需 对 首次 转移 取 条 件 , 便 得 到 
a=》 P(Xm=j Xk ¢ A k=1,,m—1Xo=i, X="7)P(X1 =7|Xo =) 
天 cg 
= 六 PKr-i= 记 区 天 过 大 =1 一 2|Xo 一 了)Pir 
rg 
例如 , 如 果 ie 7, j #7, 那么 ,上 式 给 出 
P(Xm = Xk ¢ A k= m1Xo=i)= 》 QlPir 
rgof 
给 定 链 在 开始 时 处 在 状态 i, 到 时 刻 n 为 止 从 未 进入 过 of 中 的 任意 状态 时 , 我 
们 也 可 以 计算 Xn 的 条 件 概 率 , 即 对 于 i,j 天 7， 
P{Xn =j|Xo =i Xk ¢ oA,k =1,...,n} 
_P{Xn=j Xk gk=l, niXo=i) QO 
~ P{X¢g%k=L nlXo=i Dgr OF, 


注 至今, 我 们 所 考虑 的 概率 都 是 条 件 概 率 . 例如 ,， Pm 是 给 定时 刻 0 的 初始 状态 为 
i 时 , 在 时 刻 n 的 状态 是 j 的 概率 . 若 需 要 在 时 刻 n 的 状态 的 无 条 件 分 布 , 则 就 必须 
指定 初始 状态 的 概率 分 布 . 我 们 将 它 记 为 
au 三 P{Xo= 讨 ，i>0 (Se = 1) 
i=0 


一 切 无 条 件 概率 都 可 利用 对 初始 状态 取 条 件 来 计算 . 这 就 是 ， 


P{Xn =j}= > P{Xn=jlXo= 计 P{Xo= 计 
i=0 


有 mn 
= Pa 


i=0 


例如 , 车 在 例 4.8 中 , ao = 0.4,aa = 0.6, 则 在 开始 保留 天 气 记录 后 4 天 下 雨 的 
(无 条 件 ) 概率 是 
P{X4 =0}= 0.4P% + 0.6P% 
= (0.4)(0.5749) + (0.6)(0.5668) 
= 0.5700 


4.3 ”状态 的 分 类 


状态 7 称 为 是 从 状态 i 可 达 的 , 如 果 对 于 某 个 n>0 有 P83 > 0. 注意 这 蕴涵 状 
态 j 是 从 状态 i 可 达 的 当 且 仅 当 从 i 开始 的 过 程 最 终 可 能 到 达 状 态 j. 它 之 所 以 正 
确 是 因为 如 果 状 态 j 不 是 从 状态 i 可 达 的 , 那么 
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P{ 最 终 渤 入 状态 开始 在 状态 量 ==P {0 {xX = 四 Xo = 


n=0 
< DP{Xn=jlXo=i}= P=0 
n=0 n=0 
互相 可 达 的 两 个 状态 i 和 j 称 为 互通 的 , 写 为 i i 

注意 任意 状态 都 与 它 自己 是 互通 的 , 由 定义 有 


Pa =P{Xo=ilXo=i}=1 


互通 关系 满足 以 下 的 三 个 性 质 : 

( 一切 i 之 0, 状态 1 与 状态 i 互通 . 

(i) 如 果 状态 i 与 状态 j 互通 , 那么 状态 7 与 状态 i 互通. 

(ii) 如 果 状 态 i 与 状态 7 互通 , 且 状 态 j 与 状态 互通, 那么 状态 i 与 状态 
互通 . 

性 质 i) 和 (ii) 即 得 自 互通 的 定义 . 为 了 证 明 性 质 (ii), 假设 i 与 7 互通 , 且 j 
与 上 互通 . 于 是 存在 整数 n 和 m 使 PS > 0, PR > 0. 现在 由 C-K 方程, 我 们 有 


Prt™ = PrP > PPR >0 
r=0 
因此 , 状态 是 从 状态 i 可 达 的 . 类 似 地 , 我 们 可 以 证 明 状 态 i 是 从 状态 可 达 的 . 
因此 , 状态 i 与 状态 人 互通. 

两 个 互通 的 状态 , 称 为 在 同一 个 状态 类 中 . (i)、(ii) 和 (说) 的 简单 推论 是 , 两 个 
状态 类 或 者 相同 , 或 者 不 相交 . 换 句 话说 , 互通 的 概念 将 状态 空间 分 为 许多 分 离 的 
类 . 马尔 可 夫 链 称 为 不 可 约 的 , 如 果 只 有 一 个 类 , 也 就 是 所 有 的 状态 彼此 互通 . 

例 4.14 考虑 由 0,1,2 三 个 状态 组 成 的 马尔 可 夫 链 , 其 转移 概率 矩阵 为 


© VIc MI 
wm I MI 
wINAIC OO 


容易 验证 这 个 马尔 可 夫 链 是 不 可 约 的 . 例如 , 它 可 能 从 状态 0 到 达 状 态 2, 因为 
0 一 1 一 2 


即 从 状态 0 到 达 状 态 2 的 一 个 途径 是 , 从 状态 0 到 状态 1( 以 概率 1/2), 然后 从 状态 
1 到 状态 2( 以 概率 1/4). 国 
例 4.15 ”考虑 由 0, 1, 2, 3 四 个 状态 组 成 的 马尔 可 夫 链 , 其 转移 概率 矩阵 为 
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忆 

外 
© Alc blr bin 
© mm br NI 
oo oo 
SS 


© Ic 
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此 马尔 可 夫 链 的 类 是 {0,1}、{2}、{3}. 注意 状态 0( 或 1) 是 从 状态 2 可 达 的 , 但 是 反 
过 来 并 不 对 . 由 于 状态 3 是 一 个 吸收 态 , 即 PBs = 1, 所 以 没有 从 它 可 达 的 其 他 状态 . 


对 于 任意 状态 i, 我 们 以 fi 记 开 始 在 状态 i 的 过 程 迟早 将 再 进入 i 的 概率 . 如 
果 fi = 1 状态 i 称 为 常 返 态 ; 如 果 上 < 1, 状态 i 称 为 暂 态 . 
假设 过 程 开 始 在 状态 i, 且 i 是 常 返 态 . 因此 过 程 将 以 概率 1 再 进入 i. 然而 , 由 
马尔 可 天 链 的 定义 , 当 它 再 进入 i 时 , 该 过 程 将 又 重复 , 从 而 状态 i 最 终 将 再 度 被 访 
问 . 继续 重复 这 个 推理 产生 如 下 结论 : 如 果 状 态 i 是 常 返 态 , 那么 开始 在 状态 i 的 过 
程 将 一 再 地 进入 i( 事 实 上 是 无 穷 多 次 ). 
另 一 方面 , 假设 状态 i 是 暂 态 . 因此 , 过 程 每 次 进入 i 将 有 一 个 正 的 概率 1 一 fi 
不 再 进入 这 个 状态 . 所 以 , 开始 在 状态 i 的 过 程 将 恰好 在 状态 i 停留 n 个 时 间 周 期 
的 概率 等 于 f?-!(1 一 万 ),m > 1. 换 句 话说 , 如 果 状 态 i 是 暂 坊 , 那么 开始 在 状态 i 
的 过 程 处 于 状态 i 的 时 间 周期 的 个 数 有 一 个 有 限 均值 为 1/(1 一 户 ) 的 几何 分 布 . 
从 以 上 两 段 推出 , 状态 i 是 常 返 态 当 且 仅 当 开 始 在 状态 i 的 过 程 处 于 状态 i 的 
时 间 周 期 的 期 望 数 是 无 穷 的 . 但 是 , 令 
-{ 1， 若 Xn=i 
” 


我 们 有 沁 2o In 表示 过 程 处 于 状态 i 的 时 间 周 期 的 个 数 . 再 有 
E 区 In|Xo = | =》 EnlXo=1]= > P{Xn =ilX0=i} = PR 
n=0 n=0 n=0 


n=0 
如 此 , 我 们 就 证 明了 了 如 下 的 命题 . 
命题 4.1 状态 i 是 oo 
常 返 态 , 如 果 》 PR = o0; 
n=1 
暂 态 , 如 果 >》 如 < oo 
n=1 

证 明 上 述 命题 的 推理 更 加 重要 , 因为 它 也 表明 了 一 个 暂 态 只 能 被 访问 有 限 次 

( 因 之 名 为 暂 态 ). 由 此 得 出 在 一 个 有 限 状 态 马尔 可 夫 链 中 不 可 能 所 有 的 状态 部 是 暂 
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态 . 为 了 明白 此 理 , 假设 状态 为 0,1,…, M, 并 假设 它们 都 是 暂 态 . 那么 在 有 限时 间 
后 (例如 , 时 间 To 后 ) 状态 0 不 再 被 访 , 而 在 有 限时 间 后 (例如 , 时 间 Ti 后 ) 状态 1 
不 再 被 访 , 在 有 限时 间 后 (例如 , 时 间 Ta 后 ) 状态 2 不 再 被 访 , 如 此 等 等 . 于 是 在 有 
限时 间 了 = max{Tb, Ti,……,Tw} 后 无 状态 可 访 . 但 是 因为 过 程 在 时 间 了 后 必须 处 
于 某 个 状态 , 我 们 产生 了 一 个 矛盾 , 它 说 明 至 少 一 个 状态 必须 是 常 返 态 . 

命题 4.1 的 另 一 个 用 处 是 , 它 可 使 我 们 证 明 常 返 性 是 一 个 类 性 质 . 
推论 4.2 ”如 果 状 态 i 是 常 返 态 , 而 状态 i 与 状态 j 互通 , 那么 状态 j 是 常 返 态 . 
证 明 ”为 了 证 明 它 , 我 们 首先 注意 , 由 于 状态 i 与 状态 7 互通 , 存在 整数 上 和 m 使 
下 > 0, PR > 0. 现在 , 对 于 任意 整数 nn 有 


m+ntk ~ pm pn pk 
Py > PRPRP: 


这 是 由 于 上 式 左边 是 从 j 经 m+n+k 步 后 到 j 的 概率 , 而 右边 是 从 j 经 m 十 n 十 
步 后 到 j 的 概率 , 不 同 的 是 , 它 经 过 的 路 径 是 : 从 了 经 mm 步 后 到 i 然后 从 i 经 附加 
的 n 步 后 到 i 然后 从 i 经 附加 的 上 步 后 到 j. 

将 上 面 对 n 求 和 , 我 们 得 到 


D PB" > PRPS DPR= 00 
n=1 n=1 
由 于 夏 P > 0, 且 由 于 状态 i 是 常 返 态 , ?1 PR 是 无 穷 大 . 因此 由 命题 4.1 推出 
状态 j 也 是 常 返 态 . 图 
注 (i) 推论 42 也 蕴涵 了 暂 态 性 是 一 个 类 性 质 . 因为 如 果 状 态 站 是 暂 态 且 与 状态 j 
互通 , 那么 状态 了 必须 也 是 暂 态 . 因为 如 果 j 是 常 返 态 , 由 推论 4.2, i 将 是 常 返 态 ， 
从 而 不 能 为 暂 态 . 

(ii) 推论 4.2 及 上 面 我 们 关于 有 限 状 态 马尔 可 夫 链 的 所 有 状态 不 能 都 是 暂 态 的 
结论 , 产生 了 有 限 不 可 约 马尔 可 夫 链 的 所 有 状态 都 是 常 返 态 的 结论 . 
例 4.16 令 由 状态 0, 1, 2, 3 组 成 的 马尔 可 夫 链 有 转移 概率 矩阵 


C0 


0 1 

1 
确定 哪些 状态 是 暂 态 , 而 哪些 状态 是 常 返 态 . 
解 ”容易 验证 所 有 的 状态 是 互通 的 , 而 且 这 是 一 个 有 限 链 , 因此 所 有 的 状态 必须 是 
常 返 态 . 国 
例 4.17 ”考虑 由 状态 0, 1, 2, 3, 4 组 成 的 马尔 可 夫 链 , 而 


2 
P-|100 
0 
0 


口 口 口 9 
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了 
3 
1 1 
200 
a 下 ! 
i 全 过 到 全 
这 
0 了 5 0 
1 1 
了 0 
确定 常 返 态 . 
解 ” 这 个 链 由 三 个 类 {0,1}、{2,3} 和 {4} 组 成 . 前 两 个 类 是 常 返 态 的 , 而 第 三 个 是 
暂 态 的 . B® 


例 4.18( 随 机 游 动 ) ”考虑 一 个 马尔 可 夫 链 , 其 状态 空间 由 整数 0, 圭 1, 土 2,… 组 成 ， 
而 由 
Piiti=p=1— Pi i=0,+l,+2,.… 

给 出 其 转移 概率 , 其 中 0 < p <1. 换 句 话说 , 过 程 在 每 次 转移 时 , 或 者 向 右 移动 一 步 
(以 概率 p), 或 者 向 左 移动 一 步 (以 概率 1 p). 对 这 个 过 程 的 一 个 形象 的 描述 是 一 
个 醉 汉 沿 着 直线 游 动 . 另 一 个 描述 是 一 个 赌 徒 的 收获 , 即 他 每 次 赌博 赢 或 输 1 美元 . 

因为 所 有 的 状态 是 互通 的 , 由 推论 4.2 推出 , 它们 或 者 都 是 常 返 态 , 或 者 都 是 暂 
态 . 所 以 我 们 考察 状态 0, 并 尝试 确定 沁 21 P%% 是 有 限 或 是 无 穷 大 . 

由 于 在 奇数 次 赌博 后 最 终 不 可 能 平局 (用 赌博 模型 解释 ), 当然 , 我 们 必须 有 


PR !=0, n=1,2,.…. 


另 一 方面 在 2n 次 赌博 后 , 我 们 处 于 平局 当 且 仅 当 如 果 我 们 赢 次 且 输 次 . 
因为 每 次 周 博 的 结果 是 赢 的 概率 是 p, 而 是 输 的 梳 率 是 1 - p, 此 需求 的 概率 是 二 项 
概率 

=) "3. 
用 由 斯 特 林 给 出 的 一 个 近似 它 表明 


nl~n"tl/2e-nV2n (4.3) 


其 中 当 limn-,oo an/bn = 1 时 , 就 说 an ~ 如, 于 是 得 到 
Pan ~ (Ap(1 =—7))" 
00 Vi 
如 今 容易 验证 对 于 正 的 an,bn, 如 果 an ~ 加, 那么 证 an < co 当 且 仅 当 学 , bn < co, 
因此 , ?1 P% 收敛 当 且 仅 当 
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S (4p(1 —p))” 
收 钱 然而 ,4p(1 一 呈 < 县 等 成立 当 有 仅 当 p= 到 四 此 Zm， 觅 =co 当 且 
仅 当 p= 二 A 1 时 ,这 个 链 是 弟 运 的 ,而 兴 尖 时 , 这 个 链 是 暂 态 的 

当 p= 当 时 ， 上 而 的 过 和 种 为 对 条 随和 革 动 二条 
称 随机 游 动 . “例如 ,在 二 维 情形 的 对 称 随机 游 动 过 程 和 次 转移 者 以 概率 . 向 左 、 有 、 
上 、 下 每 个 方向 之 一 走 一 步 . 即 状 态 是 一 对 整数 (i,j), 而 转移 概率 为 

Paper = Pear = Finestb= Pantts-D = 

用 与 一 维 情形 相同 的 方法 , 我 们 证 明 此 马尔 可 夫 链 也 是 常 返 的 . 

由 这 个 链 是 不 可 约 的 推出 , 如 果 状 态 0=(0,0) 是 常 返 态 , 那么 所 有 的 状态 都 是 
常 返 态 , 所 以 只 需 考察 PS. 如 果 对 于 某 个 0 < i < mw 由 i 步 向 左 , i 步 向 有 , n 一 i 
步 向 上 , n 一 i 步 向 下 组 成 2n 步 , 那么 在 2n 步 以 后 , 这 个 链 将 回 到 原来 的 位 置 . 由 
每 一 步 以 概率 1/4 是 这 四 种 类 型 之 一 推出 所 求 的 概率 是 多 项 概率 . 妈 


二 0) 
A 的 站 
“0 卫 


其 中 最 后 的 等 式 用 了 组 合 恒等式 


2m mn n 
-We 
得 到 它 只 需 注意 两 边 都 表示 从 nt 个 白 球 和 n 个 黑 球 的 一 个 集合 中 选取 大 小 为 n 的 
子 集合 的 个 数 . 现在 
本 2n)! 
-名 
(2n)2n+1/2e-2n Van 
“manfie-2n(27) ， 
dn 
Vn 


由 斯 特 林 的 近似 


166 第 4 章 马尔 可 夫 链 


因此 , 由 方程 (4.4) 我 们 看 到 


它 显示 了 学, P88 = co, 从 而 所 有 的 状态 都 是 常 返 态 . 
相当 有 趣 的 是 , 尽管 一 维和 二 维 对 称 随 机 游 动 都 是 常 返 的 , 但 是 所 有 更 高 维 的 
对 称 随机 游 动 都 是 暂 态 的 . (例如 ， hn 
方式 之 一 移动 , 即 向 左 , 向 右 , 向 上 , 向 下 , 向 里 和 向 外 .) 
注 ”对 于 例 4.18 中 的 一 维 随机 游 动 ， Se 
在 非 对 称 的 情形 确定 最 终 回 到 0 的 概率 . 令 


B=P{ 最 终 回 到 0}. 
为 了 确定 B, 先 对 初始 转移 取 条 件 得 到 
B=P{ 最 终 回 到 0|Xi = 1}p 十 P{ 最 终 回 到 0|X1 = 一 1}(1 一 p). (4.5) 


现在 , 以 a 记 给 定 当前 的 状态 是 1 的 马尔 可 夫 链 最 终 回 到 状态 0 的 概率 . 因为 不 管 
当前 的 状态 是 什么 , 马尔 可 夫 链 总 是 以 概率 p 增 加 1 或 者 以 概率 1 一 p 减少 1 注意 
对 于 任意 i, a 也 是 当前 的 状态 是 i 的 马尔 可 夫 链 最 终 进 入 状态 i 一 1 的 概率 . 为 了 
得 到 a 的 一 个 方程 , 取 条 件 于 下 一 次 的 转移 , 得 到 
a = P{ 最 终 回 来 |X1 = 1,X2 = 0}(1 一 p) 十 P{ 最 终 回来 |X1 = 1,X2 = 2}p 
三 1 一 p 十 P{ 最 终 回 来 |X1 = 1,X2=2}p 
一 工 一 和 十 5 
其 中 最 后 一 个 等 式 是 由 注意 以 下 情形 得 到 的 , 即 为 了 链 最 终 从 状态 2 到 状态 0, 它 
必须 首先 到 状态 1, 而 它 最 终 发 生 的 概率 是 as 而 如 果 它 最 终 到 状态 1, 它 还 必须 到 
状态 0, 而 它 最 终 发 生 的 条 件 概率 也 是 a. 所 以 
a=1-p+pa? 
这 个 方程 的 两 个 根 是 a = 1 和 a = (1 一 p)/p. 因此 , 在 对 称 随机 游 动情 形 p = 1/2， 
我 们 可 以 得 到 a = 1. 由 对 称 性 , 给 定 当 前 的 状态 是 一 1 的 马尔 可 夫 链 最 终 回 到 状 
态 0 的 概率 也 是 1i 证 明了 对 称 随机 游 动 是 常 返 的 . 
现在 假设 p > 1/2. 在 这 种 情形 , 可 以 证 明 ( 见 本 章 的 习题 17)P{ 最 终 回 到 
0|X1 = -1} = 1. 因此 , 方程 (4.5) 化 简 为 


有 =ap+1 一 P 


因为 在 这 种 情形 随机 游 动 是 暂 态 的 ,所 以 B < 1, 这 证 明了 a 关 1. 所 以 a= (1-p)/p， 
并 有 
B=2(1-7p), p>1/2 
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类 似 地 , 当 p < 1/2 时 , 我 们 可 以 证 明 B = 2p. 于 是 , 一 般 地 
P{ 最 终 回 到 0} = 2min(p,1 一刀 . 图 


例 4.19(Aloha 协议 的 最 终 不 稳定 性 ) ”考察 一 个 通信 设备 , 其 中 在 每 个 时 间 段 n= 
1,2,… 到 达 的 信息 的 个 数 是 独立 同 分 布 的 . 令 oi = P(i 到 达 ), 并 假设 co + aa < 1. 
每 个 到 达 的 信息 将 在 它 到 达 的 时 段 结 束 时 被 传送 . 如 果 恰好 有 一 个 信息 被 传送 , 那 
么 这 个 传送 成 功 , 而 此 信息 离开 此 设备 . 然而 , 如 果 任 何 时 间 有 两 个 或 更 多 的 信息 
同时 被 传送 , 那么 认为 这 时 发 生 了 碰撞 , 而 这 些 信息 就 留 在 系统 中 . 一 个 信息 一 旦 卷 
入 碰撞 , 它 将 在 一 个 附加 的 时 段 结束 时 独立 于 其 他 情况 地 以 概率 p 被 传送 , 这 就 是 
所 谓 的 Aloha 协议 (因为 它 首先 在 夏威夷 大 学 制定 冯 . 我 们 证 明 在 以 概率 1 传送 成 
功 的 个 数 是 有 限 的 意义 下 的 设备 是 渐 近 不 稳定 的 . 

首先 , 我 们 以 Xn 记 在 第 ”个 时 段 开始 时 设备 中 的 信息 的 个 数 . 并 且 注意 到 
{Xn,n > 0} 是 马尔 可 夫 链 , 现在 对 大 > 0 定义 示 性 变 基 I 为 


I = | 1， 若 链 首次 离开 状态 上 时 直接 到 状态 一 1 
0， 其 他 情形 ， 

而 当 设 备 永 不 在 状态 k(k > 0) 时 ， 令 它 为 0( 例 如 ， 若 相继 的 状态 为 0，1，3， 

4,…, 则 五 = 0, 因为 当 链 首次 离开 状态 3 时 , 它 去 4; 然而, 若 它们 是 0, 3, 3， 

2,…, 则 13 = 1, 因为 这 时 它 去 2). 现在 


也 立 5| = El = Sp =1}< 六 pn = 1| 最 终 到 达 k}.。 (4.6) 
上 ==0 k=0 k=0 k=0 


现在 , P{ 太 = 1| 最 终 到 达 k} 是 离开 状态 上 后 下 一 个 状态 是 上- 1 的 概率 . 即 这 是 
给 定 它 不 回 到 大 的 条 件 下 , 从 上 到 此 一 1 的 传送 的 条 件 概率 , 所 以 


P{A = 1 最 终 到 达 及 = 并 和 印 二 . 


我 们 有 
及 ki =aokp(1 —p)*!, Pek = aoll— kp(1—p)* ]+a(l—p)* 


这 得 自 , 如 果 一 天 初 有 上 大 个 信息 出 现 , 那么 (a) 第 二 天 初 有 此 一 1 个 信息 , 如 果 这 天 
没有 新 信息 , 而 且 在 此 大 个 信息 中 恰 有 一 个 被 传送 ; (b) 第 二 天 初 有 个 信息 , 如 果 
这 天 是 如 下 情形 之 一 : 

(i) 没有 新 信息 , 而 在 此 大 个 信息 中 并 不 是 恰 有 一 个 被 传送 . 

(ij) 恰 有 一 个 新 信息 ( 它 自动 地 传送 ), 而 在 另外 大 个 信息 中 没有 信息 被 传送 . 
将 上 面 代入 方程 (4.6) 得 到 

@ aloha 是 夏威夷 人 表示 致意 的 问候 语 .一 一 编者 注 
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ne aokp(1 一 到-: 
ba Dr rr A 


其 中 的 收敛 性 得 自 , 当 kk 大 时 上 面 表达 式 的 分 母 收敛 到 1 -- ao, 于 是 和 的 收敛 或 发 
散 决定 于 分 子 中 各 项 的 和 是 否 收敛 , 而 并 Bok(1 一 p)* < oo. 
所 以 忆 [ 沁 吧 0 术 ] < co, 它 芍 涵 并 已 o I < oo, 其 概率 为 1( 因 为 如 果 于 人 0 下 
有 一 个 正 概率 使 它 可 能 为 co, 那么 它 的 均值 将 是 o0). 因此 , 以 概率 1 有 : 经 过 相继 
的 传送 , 只 有 有 限 个 数 的 状态 开始 离开 , 即 存在 某 个 有 限 整 数 N 使 设备 中 N 个 或 
者 更 多 的 信息 总 不 会 成 功 传送 . 由 此 (以 及 最 终 将 达到 这 种 更 高 的 状态 的 事实 一 一 
为 什么 ?) 推出 , 以 概率 1 只 成 功 传送 有 限 个 . 四 
注 ”作为 斯 特 林 近 似 的 一 个 (有 点 不 够 严格 的 ) 概率 证 明 , 令 X1,X2，… 是 独立 的 
泊 松 随机 变量 , 每 个 有 均值 1. 令 Sn = i-1 Xi, 注意 Sn 的 均值 和 方差 都 是 n. 现 
在 
P{Sn =n}=P{n—1< SS, <n} 
=P{-1/Vi< (Sn —n)/Vn < 0} 
0 
吉 | (27)-12e-**/2qz， 当 nn 很 大 时 , 由 中 心 极限 定理 
-1/Vn 
~ (2)-V/2(1/Vn) 
= (2rm)-1/2 
但 是 Sn 是 均值 为 n 的 泊 松 随机 交 量 , 所 以 


Oy 


P{S, =n} = pe 


因此 , 对 于 很 大 的 n 有 a 
< 时 ~ (2rm)-1/2 


或 者 等 价 地 


ml ss ntl/2e-nV2n 
它 就 是 斯 特 林 近似 . 


YY 


4.4 “长程 性 质 和 极限 概率 


对 于 一 对 状态 i 关 j, 我 们 将 从 状态 i 开始 的 马尔 可 夫 链 迟早 到 达 状 态 j 的 概 
率 记 为 ij. 就 是 说 ， 


Ji 二 P{ 对 某 个 n>0 有 Xn =jlXo 一 计 . 
于 是 我 们 有 下 述 结果 . 
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命题 4.3 着 1 是 常 返 的 , 且 i 和 j 互通 , 则 天 ;二 1 
证 明 ”因为 i 和 j 互通 , 存在 一 个 值 n 使 Pr > 0. 令 Xo=i, 若 Xn = 小 则 称 之 
为 首次 机 会 成 功 . 注意 首次 机 会 成 功 的 概率 为 Pn; > 0. 若 首 次 机 会 不 成 功 , 则 考 
虑 (在 nn 后 的 ) 此 链 下 一 次 的 进入 i.。( 因 为 状态 i 是 常 返 的 , 我 们 肯定 链 迟 早 重新 
进入 状态 i.) 如 果 n 时 段 后 马尔 可 夫 链 又 处 在 状态 j, 那么 称 之 为 第 二 次 机 会 成 功 . 
若 第 二 次 机 会 不 成 功 , 则 等 到 链 再 下 一 次 进入 i 如 果 n 时段 后 马尔 可 夫 链 处 在 状 
态 j, 那么 称 之 为 第 三 次 机 会 成 功 . 如 此 继续 , 我 们 可 以 定义 无 限 个 机 会 , 每 次 都 以 
相同 的 正 概率 Pi 得 到 成 功 . 因为 直至 首次 成 功 出 现时 , 机 会 的 次 数 是 参数 为 Pn; 
的 几何 随机 变量 , 由 此 推出 成 功 出 现 的 概率 迟早 为 1, 从 而 进入 状态 7 的 概率 迟早 
为 1. 图 
如 果 状 态 j 是 常 返 的 , 我 们 将 从 7 开始 的 马尔 可 夫 链 返回 状态 j 的 期 望 转移 次 
数 记 为 mj. 就 是 说 , 以 


Ni = min{n> 0: Xn = 站} 
记 直 至 马尔 可 夫 链 作 一 次 转移 到 状态 j 的 转移 次 数 , 并 记 


mj 一 了 [Ni|Xo = 


定义 若 mi < co, 则 称 状态 j 为 正常 返 的 , 而 若 mj = co, 则 称 状态 7 为 零 常 返 的 ， 

现在 假设 马尔 可 夫 链 是 不 可 约 且 常 返 的 . 我 们 在 此 情况 下 证 明 此 链 在 状态 j 停 
留 的 长 程 时 间 比 例 等 于 过. 就 是 说 , 以 zj; 记 马 尔 可 夫 链 在 状态 7 停留 的 长 程 时 间 
比例 , 则 我 们 有 下 述 命题 . 
命题 4.4 ” 若 马 尔 可 夫 链 是 不 可 约 且 常 返 的 , 则 对 于 任意 初始 状态 有 

Ti 一 

证 明 ”假设 马尔 可 夫 链 从 状态 i 开始 , 以 五 记 直至 进入 状态 j 的 转移 次 数 ; 并 以 
T2 记 从 Ti 直至 马尔 可 夫 链 下 一 次 进入 状态 j 的 附加 转移 次 数 ; 然后 以 T3 记 从 
+T2 直至 马尔 可 夫 链 再 下 次 进入 状态 j 的 附加 转移 次 数 , 如 此 继续 . 注意 Ti 是 
有 限 的 , 因为 命题 4.3 告诉 我 们 转移 到 j 的 概率 迟早 为 1. 再 则 , 对 n> 2, 因为 Th 是 


在 第 n 一 1 次 和 第 n 次 进入 j 之 间 的 转移 次 数 , 由 此 从 马尔 可 夫 性 质 推出 ,7T2,…… 
是 独立 同 分 布 的 , 且 以 mj 为 均值 . 因为 在 时 刻 T+… 十 Tn 第 n 次 转移 到 状态 j， 
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我 们 得 到 此 链 处 于 状态 j 的 长 程 时 间 比 例 i 是 


办 n 
他 二 
-ET 
1 
“i 
1 
my 
其 中 最 后 的 等 号 得 自 , 因为 limn-.soTi/n = 0, 并 且 从 强大 数 定律 推出 


PtetTh in B+ + 四 
| J 


于 一 oo n m 一 co n-l n 


因为 mj < oo 等 价 于 地- > 0, 由 此 推出 , 当 且 仅 当 x; > 0 时 , 状态 7 正常 返 . 


我 们 现在 将 正常 返 拓展 为 关 的 性 质 
命题 4.5 ”车 i 正 常 返 , 且 i 忆 j, 则 jj 正常 返 . 
证 明 ”假设 i 正常 返 , 且 i j. 现在 取 n 使 得 Pr > 0. 由 于 mi 是 该 链 处 在 状态 
i 的 长 程 时 间 比 例 , 且 Pm 是 在 状态 i 的 链 经 过 n 次 转移 后 在 状态 7 的 长 程 时 间 比 
例 ， 
miPm = 链 在 i 且 在 n 转移 后 在 状态 j 的 长 程 时 间 比 例 
= 链 在 7 且 在 转移 前 在 状态 站 的 长 程 时 间 比 例 
科 链 在 7 的 长 程 时 间 比 例 


因此 , mr > miPm > 0, 说 明 j 是 正常 返 的 . EB 
注 ( 由 上 面 的 结果 推出 ， 零 常 返 也 是 类 的 性 质 . 为 此 假设 i 是 零 常 返 的 , 目 i j. 
因为 i 是 常 返 的 , 且 i j, 我 们 可 得 结论 j 是 常 返 的 . 但 是 若 j 是 正常 返 的 , 则 由 上 
面 的 命题 i 将 也 是 正常 返 的 . 因为 i 不 是 正常 返 的 , 所 以 j 也 不 是 正常 返 的 . 

(i 一 个 不 可 约 的 有 限 马尔 可 夫 链 必 须 是 正常 返 的 . 因为 我 们 知道 这 样 的 链 必 
是 常 返 的 , 因此 它 的 一 切 状 态 不 是 正常 返 就 是 零 常 返 ， 如 果 它 们 都 是 零 常 返 的 , 那 
么 一 切 的 长 程 比例 都 等 于 0, 这 是 不 可 能 的 , 因为 它 的 状态 有 限 . 因此 , 我 们 可 得 出 
这 样 的 链 是 正常 返 的 结论 . 

为 了 确定 长 程 比例 {7j,j > 1}, 注意 到 , 因为 mi 是 从 状态 i 转移 的 长 程 比例 ， 
SE TiPij = 从 状态 i 到 状态 j 转移 的 长 程 比例 
将 上 式 对 i 求 和 , 就 得 出 
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7 一 mmPy 

事实 上 , 可 以 证 明 以 下 的 重要 定理 . 
定理 4.1 ”考虑 一 个 不 可 约 的 马尔 可 夫 链 . 若 此 链 是 正常 返 的 , 则 长 程 比例 是 方程 
7 = npy, jz1 


D5=1 
EE 


的 唯一 解 . 再 则 , 若 上 述 线 性 方程 无 解 , 则 此 马尔 可 夫 链 是 暂 态 的 或 者 是 零 常 返 的 ， 
而 且 一 切 i 二 0. 

例 4.20 ”考察 例 4.1, 其 中 我 们 假定 , 若 今 天 是 雨天 则 明天 下 雨 的 概率 为 a, 而 若 今 
天 不 是 雨天 则 明天 下 雨 的 概率 为 8. 如 果 我 们 将 下 雨 称 为 状态 0, 而 将 不 下 雨 称 为 
状态 1, 那么 由 定理 4.1, 长 程 比例 ro 和 ma 可 由 下 式 推出 


To0= aro + Bm, 
n= (1— oa)ro + (1— Bm, 


1 
(4.7) 


T0 十 Tl 一 1 
2 __1-a 
VM TG 
例如 , 若 a = 0.7,8 = 0.4, 则 长 程 比例 为 ro = $ ~ 0.571 国 
例 4.21 考察 例 4.3, 其 中 人 的 情绪 考虑 为 具有 转移 概率 矩阵 
0.5 0.4 0.1 
P=|03 04 0.3 
0.2 0.3 0.5 


的 三 个 状态 的 马尔 可 夫 链 . 在 长 程 中 , 过 程 处 于 三 个 状态 中 的 每 一 个 的 时 间 比 例 是 
多 少 ? 
解 ” 长 程 比例 mi(i = 0,1,2) 由 解 (4.7) 式 中 的 一 系列 方程 得 到 . 这 时 , 这 些 方程 为 
To = 0.5ro + 0.3m1 + 0.2r2， 
Tl = 0.47o 十 0.4rl + 0.372, 
7T2 = 0.17o 十 0.3rl + 0.572, 
To 十 Tl 十 Ta2 一 1 


求解 得 到 
21 23 18 


VD 2 62 
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例 4.22( 阶 层 迁移 模型 ) 社会 学 家 感 兴趣 的 一 个 问题 是 确定 高 职业 阶层 或 较 低 职 
业 阶 层 在 社会 中 的 比例 . 一 个 可 能 的 数学 模型 是 , 假定 将 一 个 家 庭 中 相继 的 后 代 在 
社会 职业 阶层 之 间 的 转移 看 成 像 马 尔 可 夫 链 那样 地 转移 . 即 一 个 孩子 的 职业 只 决定 
于 他 父母 的 职业 . 假定 这 个 模型 是 恰当 的 , 并 且 其 转移 概率 矩阵 由 

0.45 0.48 0.07 
0.05 0.70 0.25 
0.01 0.50 0.49 


给 出 , 例如 , 我 们 假设 一 个 中 间 阶 层 的 工人 的 孩子 分 别 以 概率 0.05, 0.70,0.25 获得 
较 高 阶层 、 中 间 阶 层 或 较 低 阶层 职业 . 
于 是 长 程 比例 zi 满足 
To = 0.45ro + 0.05m1 + 0.0172, 
Tl = 0.48ro + 0.70rl + 0.50r2， 
T2 = 0.07ro + 0.25rl + 0.4972, 
To 十 TIl 十 T2 一 1 


P= (4.8) 


因此 
mo=0.07, 7l = 0.62， 72=0.31 

换 句 话说 , 在 阶层 间 的 社会 迁移 可 被 描述 为 一 个 马尔 可 夫 链 , 其 转移 概率 矩阵 是 由 
方程 (4.8) 给 出 的 , 在 长 程 中 , 有 7% 的 人 在 较 高 职业 阶层 , 62% 的 人 在 中 间 职 业 阶 
层 , 31% 的 人 在 较 低 职业 阶层 . 国 
例 4.23( 在 遗传 学 中 的 马尔 可 夫 链 及 哈代 - 温 伯 格 律 ) ”考察 一 个 含 很 多 个 体 的 总 
体 , 每 个 个 体 有 一 对 特殊 的 基因 , 其 中 每 个 个 体 基因 分 为 4 型 或 a 型 . 假定 基因 对 
分 别 是 AA、aa 或 Aa 的 个 体 的 比例 分 别 为 pp、gqo 和 ro(po + m 十 ro = 1). 当 两 个 
个 体 交 配 时 , 每 一 个 个 体 随机 地 选取 他 的 基因 中 的 一 个 贡献 给 所 产生 的 后 代 . 假定 
交配 是 随机 发 生 的 , 其 中 每 个 个 体 等 可 能 地 与 其 他 任意 一 个 个 体 交配 , 我 们 想 要 确 
定 下 一 代 中 基因 为 44、aa 或 4a 的 个 体 的 比例 , 记 此 比例 为 p、g 和 7, 它们 容易 由 
下 述 途径 得 到 , 即 通过 集中 观察 下 一 代 的 一 个 个 体 , 并 确定 其 基因 对 的 概率 . 

首先 , 随机 地 选取 双亲 中 的 一 个 , 随后 随机 地 选取 它 的 一 个 基因 , 这 等 价 于 随机 
地 从 全 部 基因 总 体 中 选取 一 个 基因 . 对 于 双亲 的 基因 对 取 条 件 , 我 们 看 到 一 个 随机 
选取 的 基因 为 4 型 的 概率 是 


P{A} =P{AlAA}po + P{Alaa}go + P{AlAa}ro = po + 70/2 


类 似 地 , 它 为 a 型 的 概率 是 
P{a} = qo +70/2 


因此 , 在 随机 交配 下 , 一 个 随机 选取 的 下 一 代 成 员 为 A4 型 的 概率 为 p, 其 中 
p=P{A}P{A} = (po 十 ro/2) 
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类 似 地 , 随机 选取 的 成 员 为 aa 型 的 概率 是 
q=Pf{a}P{a} = (qo +70/2)? 
为 4a 型 的 概率 是 
r=2P{A}P{a} = 2(po + ro/2)(qo 十 ro/2) 
由 于 下 一 代 的 每 个 成 员 独 立地 以 概率 p,q, 7 为 这 三 种 基因 型 的 一 种 , 由 此 推出 下 一 
代 成 员 是 44、oa 或 4a 型 的 百分比 分 别 为 p、g 和 7. 
如 果 我 们 考虑 下 一 代 的 全 体 基 因 的 资源 集合 , 那么 基因 4 的 比例 即 + 并 未 
从 前 一 代 改 变 . 这 是 通过 论证 全 体 基因 的 资源 集合 一 代 一 代 地 没有 改变 , 或 者 使 用 
以 下 简单 的 代数 运算 得 到 的 . 即 
p+7/2= (po 十 ro/2)2 二 (po 十 ro/2)(go 十 ro/2) 
= (po 十 ro/2)[po + ro/2+ go +70/2] 
二 po 十 rT0/2 由 于 po+ro 十 =1 
=P{A} (4.9) 
因此 , 在 基因 的 资源 集合 中 , 4 和 a 的 比例 和 初始 代 的 相同 . 由 此 推出 在 随机 交配 
下 , 在 初始 代 以 后 , 在 所 有 相继 的 代 中 有 基因 对 44、aa 或 4a 的 个 体 在 总 体 中 的 百 
分 比 仍 为 p、g 和 7. 这 称 为 哈代 - 温 伯 格律. 
假设 现在 基因 对 总 体 已 经 稳定 在 百分比 p、q、7. 我 们 追溯 单个 个 体 及 其 后 毅 
的 基因 历史 (为 简单 起 见 , 假定 单个 个 体 恰 有 一 个 后 代 ). 所以, 对 于 一 个 给 定 的 个 
体 , 以 Xn 记 她 的 第 ” 代 后 裔 的 遗传 状态 , 通过 对 随机 选取 的 配偶 的 状态 取 条 件 , 容 


易 验证 这 个 马尔 可 夫 链 的 转移 概率 矩阵 为 
44 aa 4a 
44 了 二 0 q+ 
aa 0 gt+3 p+3 
yA 
4a [i314 214 321+21+5 


显然 (为 什么 ?), 这 个 马尔 可 夫 链 的 极限 概率 ( 它 等 于 这 个 个 体 的 后 继 者 在 三 个 遗传 
状态 中 的 每 一 个 所 占 的 比率 ) 正 是 p、g 和 7. 为 了 验证 它 , 我 们 必须 证 明 它们 满足 
方程 (4.7). 因为 方程 (4.7) 中 的 一 个 方程 是 多 余 的 , 所 以 只 需 证 明 


p=p(p+3)+r (B+7) = (p+), 
se 


p+g+7r=1 
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但 是 这 得 自 方程 (4.9), 从 而 得 到 了 结论 . 
例 4.24 ”假设 一 个 生产 过 程 随 着 转移 概率 为 Pj(i,j = 1,…,n) 的 不 可 约 且 正常 
返 的 马尔 可 夫 链 改变 其 状态 , 并 且 假设 有 些 状 态 是 可 接受 的 , 而 余下 的 状态 是 不 可 
接受 的 . 以 4 记 可 接受 的 状态 , 而 4* 是 不 可 接受 的 状态 ， 如果 生产 过 程 称 为 处 
于 “上 ", 当 它 在 一 个 可 接受 的 状态 ; 而 称 为 处 于 “下 ”, 当 它 在 一 个 不 可 接受 的 状态 . 
确定 

(i) 生产 过 程 从 “上 ”转变 为 “下 " 的 速率 ( 即 故障 率 ); 

(ii) 当 过 程 转变 为 “下 ”时 , 保持 在 “下 "” 的 平均 时 间 长 度 ; 

(i) 当 过 程 转变 为 “上 ”时 , 保持 在 “上 ”的 平均 时 间 长 度 . 
解 ” 以 Ak(k = 1,…,n) 记 长 程 比例 . 对 于 ie 4 及 je 4e, 过程 从 状态 i 进入 状态 
j 的 速率 为 

从 状态 i 进入 状态 j 的 速率 = 天 Po 
所 以 生产 过 程 从 可 接受 的 状态 进入 状态 j 的 速率 为 
从 4 进入 状态 j 的 速率 = > iPiy 
iEA 
因此 , 过 程 从 可 接受 的 状态 进入 不 可 接受 的 状态 的 速率 ( 即 故障 发 生 时 的 速率 ) 为 
故障 发 生 率 = DiPi (4.10) 
JE4eiE4 

现在 以 可 和 万 分 别 记过 程 转变 为 “上 ”时 保持 在 “上 ”的 平均 时 间 和 过 程 转变 
为 “下 " 时 保持 在 “下 ”的 平均 时 间 . 因为 平均 每 隔 万 十 万 个 时 间 单位 有 一 次 故障 ， 
直接 推出 


所 以 由 方程 (4.10) 得 到 


1 
本 到 和 及 (4.11) 
U+D p29 
为 了 得 到 联系 5 和 万 的 第 二 个 方程 , 考虑 过 程 处 于 “上 ”的 时 间 百 分 数 , 它 显然 等 
于 ;ea Ti. 然而 由 于 过 程 在 每 5+ 万 个 时 间 单 位 中 平均 有 芯 个 时 间 单 位 处 于 

“上 ”, 由 此 又 可 直接 推出 


区 
U+D 


“上 ”的 时 间 比 例 = 
所 以 ， 
U 和 (4.12) 


因此 由 方程 (4.11) 和 方程 (4.12), 我 们 得 到 
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T= Pica 
Djeae Diea iP 
再 = 1— Diea i ice 下 


Djeae Diea iP 订 Ziehe Diea TiPy 
例如 , 假设 长 程 比例 矩阵 是 


3 全 
有 
六、 生生 
Bol 
主导 
4 4 4 4 
上 于 1 
FN 


其 中 可 接受 (“上 ”) 状态 是 1,2 而 不 可 接受 (“ 下 ") 状态 是 3, 4. 极限 概率 满足 


2 
+747 


1 1 
而 一 全 下 十 73 本 十 4 到， 


4 4 


eh WN Pe ed 
JT 24 < ra 


A 
Ss 27 Oy 


Tl 二 7T2 十 T3 十 T4 = 二 1 


故障 率 = mi(Pis + Pia)+72(Pos 十 已 4) = 入 
DV=¥, 5=2 

因此 , 故障 平均 发 生 在 时 间 的 9/32( 或 者 28 个 百分点 ) 处 . 它们 平均 持续 2 Ta 
单位 , 然后 , 在 系统 处 于 “上 ”时 延续 (平均 地 )14/9 个 时 间 单 位 . 

长 程 比例 zj(j > 0) 常 称 为 平稳 概率 . 原因 是 , 如 果 初 始 状态 按 概率 ij(j > 
选取 , 那么 在 任意 时 间 n 处 于 状态 j 的 概率 也 等 于 xj. 即 若 

P{Xo=j}=7, j>0 

则 
P{Xn = 让 = 万 ， 对 于 一 切 mwJ >0 


上 面 事实 容易 用 归纳 法 证 明 , 因为 如 果 假设 它 对 n 一 1 正确 , 那么 
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P{Xn = 让 = DP{Xn =jJlXn-l= 计 P{Xn-l= 计 
= 》 Pim 由 归纳 法 假设 
Ea 由 方程 (4.7) 


例 4.25 ”假定 在 相继 的 日 子 里 , 入 住 某 个 宾馆 的 家 庭 数 是 均值 为 和 的 泊 松 随机 变 
基 . 再 假定 一 个 家 庭 在 宾馆 停留 的 天 数 是 参数 为 p(0 < p < 1) 的 几何 随机 变量 . (于 
是 在 前 一 个 晚上 留 在 宾馆 的 一 个 家 庭 , 独立 于 已 经 在 宾馆 呆 了 多 久 , 将 在 第 二 天 以 
概率 bp 退 房 .) 再 假定 所 有 的 家 庭 是 彼此 独立 的 . 在 这 些 条 件 下 容易 看 出 , 如 果 以 Xn 
记 在 第 n 天 开始 入 住 宾馆 的 家 庭 数 , 那么 {Xn,m > 0} 是 马尔 可 夫 链 . 求 

(a) 此 马尔 可 夫 链 的 转移 概率 ; 

(b) ELXn|Xo =i); 

(c) 此 马尔 可 夫 链 的 平稳 概率 . 
解 (a) 为 了 求 Pij, 我 们 假定 在 一 天 开始 时 宾馆 中 有 i 个 家 庭 . 因为 这 i 个 家 庭 
将 以 概率 9 = 1 一 p 再 呆 一 天 , 由 此 推出 这 i 个 家 庭 中 再 留 一 天 的 家 庭 数 R; 是 二 项 
(i,q) 随机 变 基 . 所 以 , 以 N 记 这 天 新 入 住 的 家 庭 数 , 我 们 看 到 


Pi;=P(R+N=7) 
对 于 Ri 取 条 件 , 并 且 利用 N 是 均值 为 的 泊 松 随机 变 基 , 我 们 得 到 


Py=DPR tN IR = 有 (wo 
k=0 


=D PN =j-AR (wo 
k=0 
min(i,j) 


= PW 
min(i,) po 
人) 利用 上 面 的 从 状态 i 到 下 一 个 状态 及 + N 的 表示 ,我 们 有 
E[XnlXn_1 = =E[Ri+N]=ig+ 和 
因此 
E[Xn|Xn-1] = Xn-1g 十 入 


两 边 取 期 望 得 
E[X] = 和 +gE[Xn_1] 
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将 上 式 和 迭代 给 出 
E[Xn] = 入 + gE[Xn-1] 

= 和 A+g(A+ gE[Xn-2]) 

= 和 十 4A 十 q2E[X ?] 

= 和 十 9A 十 g2( 入 十 qE[Xn-a) 1 

= 入 十 4A 十 q2A 十 99E[Xn 3] 
这 说 明 

E[Xn] = 和 (1+g+g ++g"!) + gE[Xo] 

并 且 得 到 结论 


ee 
E[Xn|Xo = 让 = 加 = 只 十 gm 


(c) 对 于 求 平稳 概率 , 我 们 不 直接 采用 在 (a) 中 推导 的 复杂 的 转移 概率 . 我 们 将 
用 一 个 事实 : 平稳 概率 分 布 是 初始 状态 空间 上 使 得 下 一 个 状态 有 与 它 相同 分 布 的 
唯一 一 个 分 布 . 现在 假定 初始 状态 Xo 有 均值 为 a 的 泊 松 分 布 . 也 就 是 , 在 宾馆 中 
开始 的 家 庭 数 是 均值 a 的 泊 松 随机 变量 . 以 R 记 在 第 二 天 留 在 宾馆 的 家 庭 数 . 那 
么 , 利用 例 3.23 的 结果 , 即 如 果 每 个 事件 发 生 的 概率 是 p 且 发 生 的 事件 数 是 均值 为 
a 的 泊 松 随机 变量 , 那么 发 生 的 这 些 事件 的 总 数 是 按 均值 ad 泊 松 分 布 的 , 由 此 推出 
RR 是 均值 为 ad 的 泊 松 随机 变 基 . 此 外 , 这 天 新 入 住 的 家 庭 数 , 记 为 N, 是 均值 为 和 
的 泊 松 随机 变量 , 而 且 独立 于 R. 因此 , 由 于 独立 的 泊 松 随机 变 基 的 和 也 是 泊 松 随 
机 变量 , 由 此 推出 第 二 天 开始 的 家 庭 数 尽 + N 是 均值 为 + ad 的 泊 松 随机 变量 . 因 
此 , 如 果 我 们 选取 a 使 得 

a=A+ag 

那么 Xi 的 分 布 将 与 Xo 的 分 布 相同 . 这 意味 着 当 Xo 的 初始 分 布 是 均值 为 a = 和 /p 
的 泊 松 随机 变 基 时 , X! 有 同样 的 分 布 , 从 而 这 是 一 个 平稳 分 布 . 也 就 是 , 平稳 概率 
mi=e MP(A/p)'/il, i>0 

上 面 的 模型 有 一 个 重要 的 推广 . 即 考察 一 个 组 织 , 其 员 工分 成 7 个 不 同 的 类 型 
例如 , 此 组 织 可 以 是 一 个 法 律 公 司 , 它 的 律师 可 以 是 初级 律师 、 中 级 律师 或 合伙 人 . 
假定 一 个 员工 目前 为 类 型 i, 对 于 j = 1,…,7, 他 将 在 下 一 时 期 变 成 类 型 j 的 概率 
是 qij, 或 者 以 概率 1 - 沁 ;_) qi; 离开 此 组 织 . 再 者 , 假定 每 个 时 期 都 雇用 新 的 员工 ， 
而 且 雇用 的 类 型 1,…," 的 员工 的 数目 分 别 是 均值 为 入 ,…, 入 ; 的 独立 泊 松 随机 变 
基 . 假如 我 们 记 入， = (Xn(1),… ,Xn(7)), 其 中 Xn(i) 是 在 时 期 n 的 开始 在 组 织 中 
类 型 i 的 员工 数目 , 那么 了 n(n > 0) 是 一 个 马尔 可 夫 链 . 为 了 计算 其 平稳 概率 分 布 ， 
假定 我 们 选取 初始 状态 使 不 同类 型 的 员工 是 独立 的 泊 松 随机 变量 , 其 中 类 型 i 的 员 
工 的 平均 人 数 为 ai. 也 就 是 , 假定 Xo(1),…, Xo(7) 是 具有 各 自 的 均值 a1,…, a 的 
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泊 松 随机 变量 . 再 者 , 以 Ni( = 1,…,7) 记 在 初始 时 期 雇用 的 类 型 7 的 员工 数 . 现 
在 , 固定 i 对 于 了 = 1 um 以 Mi(j) 记 Xo(i) 个 类 型 i 员工 中 在 下 一 个 时 期 转 为 
类 型 7 的 员工 数 . 那么 , 因为 以 泊 松 数 分 布 的 Xo(i) 个 类 型 i 员工 将 独立 地 以 概率 
qij(j = 1,…,7) 转 成 类 型 7 员工 , 由 此 由 例 3.23 后 面 的 注 推出 , M;(1),…, Mi(7) 
是 独立 的 泊 松 随机 变量 , 且 Mi(j) 具有 均值 aiqi;. 因为 由 假定 Xo(1),…, Xo(7) 是 
独立 的 , 我 们 也 可 以 得 到 Mi(j) (i,j = 1,…,7) 都 是 独立 的 结论 . 因为 独立 的 泊 松 
随机 变量 的 和 也 是 按 泊 松 分 布 的 , 由 上 式 得 到 随机 变 基 


X00) = N+ MG, j=l,r 
i=1 


是 具有 均值 r 
ELX1(7)] = N+ Daiqis 
i=1 


的 泊 松 随机 变 基 . 因此 , 若 ma,…,ar 满足 


r 
oj = 入 +》 aigih 了 =1 7 


i=1 


则 Xi 将 与 Xo 有 相同 的 分 布 . 因此 , 如 果 我 们 令 a?,…,a? 满足 
= Fo j=1,,7 
i=1 


那么 此 马尔 可 夫 链 的 平稳 分 布 是 各 类 型 的 员工 数 分 别 有 为 均值 9,…,o? 的 独立 
泊 松 随机 变 其 的 分 布 . 也 就 是 , 长 程 比例 是 


r 
Trir = [Le af) /kl 
1 


可 以 证 明 存在 值 a3(j = 1,…,") 使 每 个 员工 最 终 以 概率 1 离开 此 组 织 . 再 者 , 因为 
存在 唯一 的 平稳 分 布 , 所 以 只 能 有 一 组 这 样 的 值 . 国 
下 面 的 例子 揭示 了 , 关系 mi = 1/7i 说 明 两 次 访问 一 个 状态 的 平均 时 间 间 隔 是 
该 链 处 在 此 状态 的 时 间 的 长 程 比例 的 倒数 .用 它 能 得 到 对 以 马尔 可 夫 链 的 相继 状 
态 构成 的 数据 , 计算 直至 某 个 指定 模式 出 现 的 平均 时 间 . 
例 4.26( 马 尔 可 夫 链 生成 的 数据 模型 的 平均 次 数 ) ”考虑 一 个 不 可 约 的 具有 转移 概 
率 丸和 平稳 概率 xj(j > 0) 的 马尔 可 夫 链 {Xn,n > 0}. 初始 处 于 状态 7, 我 们 想 
要 确定 直至 模型 i ,… ,ik 出 现 的 转移 次 数 的 期 望 . 即 


WE 


我 们 想 求 
E[N(i,i2,*,ir)|Xo =7] 
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注意 即使 il =7, 初始 状态 Xo 并 不 考虑 为 模型 序列 中 的 一 部 分 . 
令 Ai) 为 给 定 初始 状态 i(i > 0) 时 , 马尔 可 夫 链 进入 状态 i 的 平均 转移 次 
数 . pi) 可 以 由 以 下 一 组 方程 所 确定 , 此 方程 可 由 对 首次 转移 出 状态 i 取 条 件 得 

到 

pi)=1+ 》 Paini)，i>0 

j#i 
对 于 马尔 可 夫 链 {Xn,n > 0}, 结合 以 一 个 对 应 的 马尔 可 夫 链 , 我 们 称 之 为 上 链 , 它 
在 任意 时 间 的 一 个 状态 是 原来 的 链 的 最 近 的 上 个 状态 的 序列 . (例如 , 若 上 = 3, 而 
Xz = 4 Xs = 1X4 = 1, 则 在 时 间 4 的 大 链 的 状态 是 (4, 1, 1).) 令 r(7，… 承 ) 为 
大 链 的 平稳 概率 . 因为 x(7,…, 因 ) 是 原来 的 链 在 大 个 单位 前 的 状态 是 妃 且 跟 着 的 

太一 1 个 状态 的 次 序 为 j2,…,j 的 时 间 比例 , 我 们 可 以 得 到 结论 


Tj je) 一 Ta 


进而 因为 上 链 相 继 地 访问 状态 ia,iz,……,ik 之 间 的 平均 转移 次 数 等 于 此 状态 的 平稳 
概率 的 倒数 , 所 以 有 
1 


[访问 记 ,…,ik 之 间 的 转移 次 数 ] = i 


,ik) 


人 


(4.13) 


令 4A(il，,…,im) 为 在 给 定 前 m 次 转移 将 链 带 至 状态 X = 训 ，…,Xm = im 时 , 直 
到 模型 出 现 所 需 的 附加 转移 次 数 . 

我 们 现在 考虑 此 模型 是 否 有 重合 ,这 里 我 们 称 模型 记 ,… ,i 有 一 个 大 小 为 了 
(j < 此) 的 重 全 , 如 果 它 最 后 的 j 个 元 素 和 它 最 前 的 了 个 元 素 相同 . 即 它 有 一 个 大 小 
为 了 的 重合, 如 果 

(不 - 计 1 外) = (i i) j<k 
情形 1: 模型 记 ,…, ix 没有 重合 . 因为 没有 重 登 , 方程 (4.13) 引出 
1 

1 sik) 
因为 直至 模型 出 现 的 时 间 等 于 直到 链 进入 状态 1 的 时 间 加 上 附加 时 间 , 所 以 可 以 
写成 


E[N(i,iz,**, ir)|Xo = ix] = A 


E[N(i,i2, ir)|Xo = ik] = (ir,i1) + E[A(i)] 
上 面 的 两 个 方程 引出 
EA) = 一 Ati 
利用 
EIN(i,i2,**, ik)|Xo =7] = p(7,i1) + E[A(i)] 
给 出 结果 
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EIN(ii,iz,* ,ir)|Xo =7] = Ar aa) 十 — A(ik,i1) 


其 中 
Tlie 一 
情形 2: 现在 假设 模型 有 重生 , 并 设 它 的 最 大 重 到 的 大 小 为 s. 在 这 种 情形 下 ， 
两 次 相继 地 访问 状态 为 如 ,…, 认 的 上 链 之 间 的 转移 次 数 等 于 , 在 给 定 已 经 有 s 次 
转移 的 结果 Xi = aa,…,X。 = ia 下 , 原来 的 链 直至 模型 出 现 的 附加 转移 次 数 . 所 以 ， 
由 方程 (4.13) 有 


EM ij= 一 一 


ni ik) 
但 是 因为 
N(ii,iz, ,ik) = NG ,is) + A(il,.: ,is) 
所 以 有 
EIN(i,io, ,ik)|Xo =7] = EIN(i,i2,**,is)|Xo =7]+ i 


现在 我 们 可 以 对 模型 记 ,… ,is 重复 同样 的 程式 , 继续 这 样 做 直至 我 们 得 到 一 个 无 
重复 的 模型 , 然后 应 用 情形 1 的 结果 . 
例如 , 假设 所 需 的 模型 是 1, 2, 3, 1, 2, 3, 1, 2, 那么 
EI[N(1,2,3,1,2,3,1,2)|Xo =7] =E[N(1,2,3,1,2)|Xo =7] 
1 


因为 模型 (1, 2, 3, 1, 2) 的 最 大 重 倒 的 大 小 是 2, 与 前 面相 同 的 推理 给 出 


EIN(1,2,3,1,2)|Xo =7] = EIN(1,2)|Xo = 可 十 A 


因为 模型 (1,2) 无 重合 , 所 以 由 情形 1 得 到 


EI[N(1,2)|Xo =7] = p(7,1)+ ——s — 4(2,1) 


元 要 
因此 有 
E[N(1,2;3, 1,2,3, 1,2)|Xo =7] =p(r, 


—4p(2,1) 

到 . + 1 
mPaPasPss MmPl2PYsP? 

如 果 生 成 的 数据 是 一 个 独立 同 分 布 的 随机 变量 序列 , 且 每 个 值 等 于 j 的 概率 为 P， 

那么 马尔 可 夫 链 有 已 j = 万. 在 这 种 情形 , mi = P;. 此 外 , 因为 由 状态 i 到 状态 j 

的 时 间 是 参数 为 已 的 几何 随机 变量 , 所 以 ni,7) = 1/P;. 于 是 在 模型 1, 2, 3, 1, 2， 

3, 1, 2 出 现 前 需要 生成 的 数据 值 的 个 数 的 期 望 将 是 
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i 1 1 1 1 1 
B1BB BARR! PE Pb! PPP ! PPPY 
下 面 的 结果 十 分 有 用 . 


命题 4.6 今 {Xn,n >1} 是 有 平稳 概率 fj(] > 0) 的 不 可 约 马尔 可 夫 链 ,而 7 是 状 
态 空间 上 的 一 个 有 界 画 数 . 那么 , 以 概率 1 有 
N oo 
n=17(Xn) 
es 


1 
lim 
N 一 oo 
证 明 ”如 果 我 们 令 aj(N) 为 马尔 可 夫 链 在 时 段 1,…,N 中 在 状态 7 度 过 的 全 部 时 
间 , 那么 


7D) 
j=0 


N oo 
Dr(Xn)= DN)rG) 
n=1 j=0 
由 于 aj(N)/N 一 tj, 将 上 式 除 以 N, 然后 令 N 一 co 即 得 结果 . 
如 果 我 们 假设 只 要 链 在 状态 j, 我 们 就 赚 取 报 酬 "(7), 那么 命题 4.6 说 明 我 们 在 
单位 时 间 的 平均 报酬 是 芝 ; 7(j)j 


例 4.27 ”对 于 例 4.7 中 特 指 的 四 个 状态 的 好 - 坏 汽车 保险 系统 , 求 参 保 人 平均 所 付 
的 年 保险 费 , 如 果 他 的 年 理赔 要 求 次 数 是 均值 为 1/2 的 泊 松 随机 变 其 . 


1/2)* 
解 对 ax =e-!1?0/3)-, 我 们 有 
ao = 0.6065, al = 0.3033， az = 0.0758 


所 以 , 相继 状态 的 马尔 可 夫 链 有 如 下 的 转移 概率 矩阵 
0.6065 0.3033 0.0758 0.0144 
0.6065 0.0000 0.3033 0.0902 
0.0000 0.6065 0.0000 0.3935 


0.0000 0.0000 0.6065 0.3935 


平稳 概率 由 
1 = 0.6065ma + 0.606572, 


T2 = 0.303371 十 0.6065Ts， 
Ta = 0.0758rl + 0.303372 十 0.6065r4， 
Tl 十 T2 十 T3 十 T4 三 1 
的 解 给 出 . 将 前 三 个 方程 改写 为 
1— 0.6065 
0.6065 
T2 一 0.3033ml 
0.6065 
i 73 一 0.0758rl — 0.303372 
0.6065 


Tl， 


Ta 一 
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也 就 是 
7 = 0.6488rl， m3=0.5697m, Ta 一 0.4900m 


利用 :mi = 1 给 出 解 (保留 四 位 小 数 ) 
Tal = 0.3692， Ta = 0.2395， ns = 0.2103， md = 0.1809 
所 以 , 所 付 的 平均 年 保险 费 是 
200m1 十 250ra + 400rs 十 600rs = 326.375 国 


极限 概率 
在 例 4.8 中 , 我 们 考察 了 一 个 具有 转移 概率 矩阵 


了 | 0.7 0.3 ] 
0.4 0.6 
的 两 个 状态 的 马尔 可 夫 链 , 并 说 明了 


PC | 0.5749 0.4251 
0.5668 0.4332 


由 此 推出 PS) = PP 由 (保留 三 位 有 效 数字 ) 


pe | 0.571 0.429 | 
0.571 0.429 
给 出 , 请 注意 PS) 和 PI 差不多 相等 , 而 且 PS) 的 每 一 列 几乎 有 相等 的 值 . 事实 
上 , 当 n 一 oo 时 , P" 看 起 来 应 收敛 到 不 依赖 i 的 某 个 值 . 而 且 在 例 4.20 中 , 我 们 
演示 了 此 链 的 长 程 比例 是 ro = 4/7 = 0.571, mi = 3/7 = 0.429. 于 是 , 这 使 得 这 些 长 
程 比例 有 可 能 也 是 极限 概率 . 虽然 在 上 面 链 的 情形 这 是 事实 , 但 是 , 长 程 比例 是 极限 
概率 不 会 总 是 正确 的 . 为 了 看 清 这 为 什么 不 总 是 对 的 , 我 们 考察 一 个 具有 


Pri= Po=1 


的 马尔 可 夫 链 . 因为 此 马尔 可 夫 链 不 断 地 在 状态 0 和 1 之 间 变化 , 它 处 于 这 些 状态 
的 长 程 比例 是 1 


To 一 fl 一 1/2 


1， 若 n 偶 

Poo= { 家 : 落 加 演 
所 以 , 当 趋向 无 穷 大 时 ，Fg' 没有 极限 . 一 般 地 , 一 个 只 能 在 4 > 1 的 倍数 步 回访 
一 个 状态 的 链 (在 上 例 中 d = 2) 称 为 周期 的 , 这 时 就 没有 极限 概率 . 然而 , 对 一 个 没 
有 周期 的 (这 样 的 链 , 称 为 非 周期 的 ) 不 可 约 链 , 极限 概率 总 是 存在 , 而 且 不 依赖 初 


然而 
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始 状态 . 进而 , 此 链 处 于 状态 j 的 极限 概率 等 于 此 链 处 于 状态 j 的 长 程 比例 mj. 当 
极限 概率 存在 时 , 它 等 于 长 程 比例 可 由 设 


De lim P{Xn = 直 
并 利用 


i a 
P{Xnt1 =j} = DP{Xnti = jlXn =ijP{Xn =i} = DPyP{Xn = 
i=0 i=0 


和 oo 
1=》_P{Xn = 
i=0 
看 出 . 令 n 一 co, 上 面 的 两 个 方程 可 推出 
Qj= DD 
i=0 
1= Da 


i=0 


因此 , {aj,j > 0} 满足 以 {mj,j > 0} 为 唯一 解 的 方程 , 这 说 明了 ai = Tj,j > 0. 


4.5 一 些 应 用 


4.5.1 ” 赌 徒 破产 问题 
考察 一 个 赌 徒 , 他 在 每 次 赌博 中 以 概率 p 赢 一 个 单位 , 并 以 概率 9 = 1 一 p 输 一 
个 单位 . 假设 各 次 赌博 都 是 独立 的 , 赌 徒 在 开始 时 有 i 个 单位 , 问 他 的 财富 在 达到 0 
以 前 先 达 到 NN 的 概率 是 多 少 ? 
如 果 我 们 以 Xn 记 玩 家 在 时 间 n 的 财富 , 那么 {Xn,n > 0} 是 一 个 有 转移 概率 
Po=Prnn=!1, Pin=p=1-Pil, i=1,2,,N-1 
的 马尔 可 夫 链 . 此 马尔 可 夫 链 有 三 个 类 , 即 {0}、{1,2,…,N 一 1} 和 {和 N}. 第 一 个 
类 、 与 第 三 个 类 是 常 返 的 , 而 第 二 个 类 是 暂 态 的 . 因为 每 个 暂 态 状态 只 被 访问 有 限 
次 , 由 此 推出 在 某 个 有 限 的 时 间 后 , 此 赌 徒 将 达到 他 的 目标 N 或 者 破产 . 
以 Ri(i= 0,1,…, 入 ) 记 赌 徒 在 开始 时 有 i 个 单位 而 且 他 的 财富 最 终 达 到 N 的 
概率 . 通过 对 初始 的 一 次 赌博 的 结果 取 条 件 , 我 们 得 到 
P=pPrt+gqP, i=1,2,.…,N-1 
或 者 , 由 于 p+g=1, 等 价 地 有 
PP: + qP: =pPiri+ gqPii 
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从 而 
Pn -及 = 2 一下 i=1,2,.,N-1 


因此 , 由 于 Py = 0 , 我 们 从 上 一 行 得 到 
B-P=2P-P)=2P, 
了 卫 


2 

2 2 
PPB-P== -Pp)=|[=) Ph, 
3 2 pe 1) 9) 1 


1 一 
Ra-Pi= SAa= (9) Pi 
2 了 


N-1 

2 2 
Byr= bai= (2)lpra=Pae(2) “a 
一 Pv-l (er -2) (9 1 


将 这 些 方程 的 前 i 一 1 个 相 加 , 引出 


国 : 国 和 的 


1— (q/p) 
已 -| ij 全 


PB-P=h 


因此 


iPh, 
现在 , 利用 Pw = 1, 我 们 得 到 


1— (gq/p) 和 
m | io/pjw， ?#3 
1 1 
N 着 p=3 
a 1— (gq/p) 1 
— (gq/p)' 
| 1-(q/p™ Ds (4.14) 
1 
1 Nv’ 荐 p=3 
注意 , 当 N 一 o0， i 
(人 1 
Rs > (9), 和 
0， 车 p< 


因此 , 车 p > 1/2, 则 存在 一 个 正 概率 , 赌 徒 的 财富 将 无 限 地 增长 ; 而 若 p < 1/2, 则 
赌 徒 将 (概率 1) 在 对 阵 一 个 无 限 富有 的 对 手 时 破产 . 
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例 4.28 ”假设 麦克 斯 和 帕 蒂 决定 扔 硬币 , 扔 得 离 墙 更 近 的 人 赢 (得 一 枚 硬币 ). 帕 蒂 
玩 得 更 好 , 每 次 以 概率 0.6 获胜 . (a) 若 帕 蒂 以 5 枚 硬币 开始 , 而 麦克 斯 以 10 枚 硬币 
开始 , 问 帕 蒂 让 麦克 斯 输 光 的 概率 是 多 少 ? (b) 若 帕 蒂 以 10 枚 硬币 开始 , 而 麦克 斯 
以 20 枚 开始 , 情况 又 如 何 ? 

解 (a) 要求 的 概率 是 从 方程 (4.14) 中 置 i= 5,N = 15 和 p= 9.6 得 到 的 . 因此 要 
求 的 概率 是 


(b) 要 求 的 概率 是 


将 赌 徒 破产 问题 应 用 于 药品 检验 , 假设 开发 了 治疗 某 种 病 的 两 种 新 药 . 药品 i 
有 治愈 率 PP,i = 1,2, 其 含义 为 每 个 用 药品 i 治疗 的 病人 将 以 概率 P; 被 治愈 . 然而 ， 
治愈 率 是 不 知道 的 , 并 且 假设 我 们 想 要 确定 是 PL > 忆 还 是 已 > .为 此 考察 如 
下 的 检验 : 成 对 的 病人 相继 地 接受 治疗 , 其 中 的 一 个 成 员 接受 药品 1, 而 另 一 个 接受 
药品 2. 每 对 的 结果 是 确定 的 , 在 一 种 药 治愈 的 累计 数 超过 另 一 种 药 治愈 的 累计 数 
某 个 预定 的 固定 数 时 , 检验 停止 . 更 为 正式 地 , 令 


= { 1， 若 在 第 j 对 中 , 用 药品 1 的 病人 被 治愈 
有 0， 其 他 情形 


yl 车 在 第 j 对 中 , 用 药品 2 的 病人 被 治愈 
外 0， 其 他 情形 
对 于 一 个 预定 的 正 整数 M, 检验 于 对 以 后 停止 , 此 处 N 是 使 
XI 十 … 十 Xn 一 (到 十 … 十 于 ) =M 
或 者 
Kit Xn (K++ Yh)=-M 
的 首 个 n. 在 前 一 种 情形 , 我 们 断言 PL > 忆 , 而 在 后 一 种 情形 , Pp > 只. 
为 了 确定 上 面 的 检验 是 否 是 一 个 好 的 检验 , 我 们 希望 知道 导致 不 正确 判断 的 概 
率 . 即 对 于 给 定 P > 忆 的 Pl 和 忆 , 此 检验 不 正确 地 判断 为 P。 > P 的 概率 是 多 
少 ? 为 确定 这 个 概率 , 观察 在 检查 每 一 对 以 后 , 药品 1 与 药品 2 的 治愈 累计 数 之 差 ， 
或 者 以 概率 Pi(1 一 书 ) (这 是 药品 1 治愈 而 药品 2 没有 治愈 的 概率 ) 增加 1, 或 者 以 
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概率 忆 (1 一 PP) 减少 1, 或 者 以 概率 PP 十 (1 一 P)(1 一己) 保持 不 变 . 因此 , 如 果 
我 们 只 考虑 累计 数 的 差 有 改变 的 那些 对 , 那么 这 个 差 将 以 概率 
=P 借 加 1 增加 1 或 碱 少 D = 万 H -全 0 人 记 j 
增加 1, 而 以 概率 
i) 
P(1-B)+(1-P)P 
减少 1. 因此 , 这 个 检验 断言 忆 > PP 的 概率 等 于 以 概率 p 每 注 赢 一 个 单位 的 一 个 
赌 徒 在 增长 M 前 减少 M 的 概率 . 在 方程 (4.14) 中 置 i = M,N = 2M 显示 了 这 个 
概率 由 人 
EE 开 二 站 二 人 汉王 二， 
了 的 验 断 证 及 > P)= 1 IPT TI 
给 出 . 从 而 , 例如 , 车 Pl = 0.6 和 甩 = 0.4, 则 当 M=5 时 , 一 个 不 正确 判断 的 概率 是 
0.017, 而 当 M=10 时 减少 为 0.0003. 


4.5.2 ”算法 有 效 性 的 一 个 模型 
下 面 的 优化 问题 称 为 一 个 线性 规划 : 
在 条 件 hz = b, z > 0 下 , 最 小 化 cz. 


其 中 4 是 一 个 固定 常数 的 m x 矩阵 , c = (c1,…,cn) 和 b= (b1,…,bm) 是 固定 
常数 的 向 其 , 而 = = (z1,…,zn) 是 非 负 值 的 n 维 向 基 , 要 选 它 使 cz = 并 ciz; 最 
小 . 假设 n> m, 可 以 证 明 总 能 选取 到 至 少 有 n 一 m 分 基 为 0 的 最 优 值 2, 即 它 总 
可 以 取 成 可 行 域 中 的 一 个 所 谓 极 值 点 . 

单纯 形 法 解 线性 规划 是 通过 从 可 行 域 的 一 个 极 值 点 向 一 个 更 好 的 (通过 目标 
函数 cz) 极 值 点 (经 过 枢 轴 运算 ) 移动 直至 得 到 最 优点 . 因为 这 样 的 极 值 点 可 能 有 


= (站 ) 个, 似乎 此 方法 需要 很 多 次 的 兴 代 , 但 是 事实 上 并 非 如 此 


为 此 , 我 们 考察 一 个 关于 算法 如 何 沿 着 极 值 点 移动 的 简单 的 概率 (马尔 可 夫 链 ) 
模型 . 特别 地 , 假设 算法 在 任意 时 间 处 在 第 j 个 最 好 的 极 值 点 , 那么 在 下 一 次 枢 轴 运 
算 结果 的 极 值 点 等 可 能 地 是 7 了 - 1 个 最 好 点 中 的 任意 一 个 . 在 这 个 假定 下 , 我 们 将 
证 明 当 大 时 , 从 第 N 个 最 好 的 极 值 点 到 最 好 的 端点 的 时 间 近 似 于 均值 与 方差 都 
等 于 NN 的 对 数 (以 e 为 底 ) 的 正 态 分 布 . 

考虑 一 个 马尔 可 夫 链 , 其 中 Pi = 1, 而 


Pi;= j=1,.,i—lLi>1 


1 
i—1’ 
并 以 Ti 记 从 状态 i 到 状态 1 需要 转移 的 次 数 . 以 下 E[T] 的 一 个 递 推 公式 可 以 由 取 
条 件 于 初始 转移 得 到 : 
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E[T]=1+ De 
由 E[T1] = 0, 我 们 相继 地 看 到 
Elrd=1, BI]=1+}, ErJ=1+3 3 ++ 3) +r 
不 难 猜 测 及 归纳 地 证 明 
E[ZT] = 区 1/j 
然而 , 为 了 得 到 Ty 的 更 为 完善 的 描述 我 们 将 利用 表达 式 


Ty= DD 
其 中 人 
{ 1， 如 果 过 程 最 终 进入 j 
0， 其 他 情形 
上 述 表达 式 的 重要 性 源 于 下 面 的 命题 


命题 4.7 了 贱 ,…,IN-1 是 独立 的 , 且 

P{B=1}=1j 1<j<N-!1 
证 明 ”对 于 给 定 的 厂 H ITw, 以 n= minfi : i > 五 = 1} 记 所 到 达 过 的 大 
于 状态 j 的 最 小 标号 . 于 是 我 们 知道 过 程 进 入 状态 w 而 且 下 一 个 进入 的 状态 是 
1,2,…,j 之 一 . 因此 , 由 于 从 状态 n 到 达 的 下 一 个 状态 等 可 能 地 为 较 小 标号 的 状态 
1,2,…,n 一 1 中 的 任意 一 个 , 所 以 


i 
P{D; = 11D+1.…, In} i mn 
因此 , P{1; = 1} = 1/j, 由 于 上 面 的 条 件 概率 不 依赖 41,…, In, 所 以 独立 性 成 立 . 


图 
推论 4.8 G) EITw] = 17. 
(i) Var(Tw) = 并 (LA7)(L — 1/7). 
(这 ) 对 于 很 大 的 N, Ty 近似 地 有 一 个 均值 为 In N 和 方差 为 In N 的 正 态 分 布 . 
证 明 (i) 和 (i) 由 命题 47 和 表达 式 Ty = 民生 万 推 得 . ( 话 ) 由 中 心 极限 定理 推 


得 , 因为 
忆 当 Ew 二 | 过 
i 1 z 
从 而 


N-1 
InN<D 1/i<1+In(N-1) 


i=1 
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所 以 N-1 
mNsy》y 1 国 
j=1 
回 到 单纯 形 法 , 如 果 我 们 假定 n,m 和 n 一 m 都 很 大 , 用 斯 特 林 近 似 , 我 们 有 
i nnt1/2 
Ys Ce) ~ 

所 以 , 对 于 c= n/m 

InN~ (me ln(mc) 一 (me 一 D+3) In(m(c—1))— (mt3) Inm— 3 mn(2n) 


也 就 是 


& 


InN~m [ez TI 十 ln(c 一 yy 
现在 , 因为 ims_,owo zln[z/(z 一 1)] = 1, 当 ec 很 大 时 就 推出 
InN~mll+lIn(c—1)] 


于 是 , 例如 , 若 n = 8000,m = 1000, 则 必要 的 转移 次 数 近 似 地 有 均值 和 方差 等 于 
1000(1 + In7) s 3000 的 正 态 分 布 . 因此 , 必要 的 转移 次 数 粗略 地 以 95% 的 可 能 在 


3000 土 2V3000 大 约 是 3000 土 110 


之 间 . 
4.5.3 ”用 随机 游 动 分 析 可 满足 性 问题 的 概率 算法 
考察 一 个 状态 为 0,1,…,n 的 马尔 可 夫 链 , 其 
Pi=1, Pin=p, Pi-i1=g=1-p, 1<i<n 
并 且 假 设 我 们 想 要 研究 这 个 链 从 状态 0 到 状态 n 所 花 的 时 间 . 得 到 达到 状态 n 的 
平均 时 间 的 一 种 方法 是 以 mi 记 从 状态 i 走 到 状态 n 的 平均 时 间 , i = 0,…,n 一 1. 
如 果 我 们 取 条 件 于 初始 转移 , 就 得 到 下 面 的 方程 : 
mo=1+m, 
Ymi =E 图 达 n 的 时 间 | 下 一 个 状态 是 ;+1]p 
+E[ 到 达 mn” 的 时 间 | 下 一 个 状态 是 ;一 1 
=(1+mit)p+ (1+mi-1)g 
一 1 十 pmai+l 十 gmai-1， i=1,.…,n—l1 
尽管 从 上 面 的 方程 中 可 以 解 出 mi, i = 0,…,n 一 1, 但 是 我 们 并 不 想 要 它们 的 解 , 而 
是 想 利用 这 个 马尔 可 夫 链 的 特殊 结构 得 到 一 组 更 简单 的 方程 . 首先 , 以 Ni 记 这 个 链 
先进 入 状态 i 直至 进入 状态 i+1 所 用 的 附加 转移 次 数 . 由 马尔 可 夫 性 质 推出 这 些 
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随机 变量 Ni(i = 0,…,n 一 1) 是 独立 的 . 此 外 , 我 们 可 以 将 这 个 链 从 状态 0 进入 到 
状态 n 所 用 的 时 间 No 表示 为 


nl 
Non = DN (4.15) 
i=0 


令 jn = E[Ni], 对 这 个 链 进 入 状态 i 后 的 下 一 次 转移 取 条 件 ， 对 于 i=1,…,n-1 有 
， 让 =1+ 卫 加 达 i+1l 的 附加 转移 次 数 | 链 到 i 一 1]g 
现在 , 如 果 这 个 链 下 一 次 进入 状态 i 一 1, 那么 为 了 到 达 i + 1, 它 必 须 先 回 到 状态 i， 
然后 必须 走向 状态 i+1. 因此 , 由 前 面 可 得 
i=1+ENi1 + Ni]g 


其 中 Ni_! 和 N? 分 别 是 从 状态 i 一 1 回 到 i 的 附加 转移 次 数 和 从 i 到达 i+1 的 次 
数 . 现在 , 由 马尔 可 夫 性 质 推出 这 些 随 机 变 基 分 别 与 Ni-! 和 Ni 有 相同 的 分 布 . 此 
外 , 它们 是 独立 的 (虽然 我 们 只 用 它 计 算 No,n 的 方差 ) 因此 , 我 们 有 


Mi=1+g(Hi-1+ Hs) 


从 而 1 
i= 了 + i=1,.……,n—1 
由 yo = 1, 并 令 a = gq/p, 我 们 由 上 面 的 递 推 公式 得 到 


=1/p+o, 
12=1/p+a(l/p+a)=1/p+a/p+o, 
ks=1/pt+a(l/p+a/p+o)=1/p+a/p+a?/p+o 


一 般 地 , 我 们 有 
= 工 和 or+at i=h..,n-1 (4.16) 


现在 我 们 用 方程 (4.15) 得 到 
nli-l 
E[No,n] =1+-— D3 + 
P i=1 ;=0 
当 p=1/2 时 有 a=1, 从 上 面 我 们 看 到 
ElNon]=1+(n—-1 n+n—-1l=n 


当 p 冯 1/2 时 , 我 们 得 到 
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炎 和 一 om 

i er ) a 
l+a (a 一 am) Qa—a" 
-1+ 站 2 [ er | 1—a 


(1 a) 
其 中 第 二 个 等 式 用 了 p = 1/(1 + a) 所 以 , 我 们 看 到 当 a > 1 时 , 或 者 等 价 地 , 当 
p < 1/2 时 , 到 达 n 的 转移 次 数 的 期 望 是 对 n 指数 地 递增 的 函数 ， 另 一 方面 , 当 
p = 1/2 时 , BINon] = ma, 而 当 p > 1/2 时 , 对 很 大 的 mw BINo.n] 实质 上 对 n 是 线 
性 的 . 

现在 我 们 计算 Var(No.n). 为 此 , 我 们 再 一 次 利用 方程 (4.15) 中 给 出 的 表达 式 . 
令 w = Var(Ni). 我 们 先 利用 条 件 方差 公式 递 推 地 确定 vi. 如 果 离开 状态 i 首次 转 
移 到 ;+ 1, 则 令 8; = 1 而 如 果 离 开 状态 i 首次 转移 到 i 一 1, 则 令 5; = -1i = 


1 一 1. 于 是 
给 定 Si = 1: Ni =1 


给 定 9 = -1: Ni =1+Ni+N7 


因此 
E[NilS; =1]=1，E[NilS = -1]=1+ji+h 


它 表 明 
Var(E[NilSi) = Var(E[Ni|Si] — 1) 

= (Hi-1 十 后 )29 — (hi-i 十 后 )292 

一 gp(HU-l 十 Ji) 
此 外 , 由 马尔 可 夫 性 质 , 从 状态 i 一 1 回 到 i 的 附加 转移 次 数 Ni_， 和 从 i 到达 i 二 1 
的 次 数 N*, 是 分 别 与 Ni-1 和 Ni 有 相同 分 布 的 独立 随机 变量 , 由 此 我 们 看 到 

Var(NilSi = 1) = 0， Var(NilSi = —1)= w-l 十 由 
因此 1 
E[Var(NilSi] = gq(vi-1 + vi) 
由 条 件 方差 公式 , 我 们 得 到 
vi = pq(pi-1 + 4) + gq(vi-1 + Vi) 


或 等 价 地 
Vi=qpiithi) +avil, i=1,,n—l 


由 vo = 0, 我 们 由 前 面 的 递 推 公式 得 到 
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v1 = gq(po + p1)?, 

v2 = q(t + 12)? + aq(po + p1)?, 

va = g(p2 + 13)? + ag(p1 + p2)? + a?q(po + p1)? 
一 般 地 , 对 于 i> 0, 我 们 有 


1 
Vi=qD oi(p1+p)? (4.17) 
所 


or(Non) = er 1 十 及 六 


1 31 
其 中 jw; 由 方程 (4.16) 所 给 出 . 

我 们 从 方程 (4.16) 和 方程 (4.17) 看 到 , 当 p > 1/2 时 , 有 a < 1, 从 状态 i 到 
i+1 的 转移 次 数 的 均值 yv; 和 方差 vi, 对 i 的 增长 不 会 太 快 . 例如 , 当 p= 1/2 时 , 由 
方程 (4.16) 和 方程 (4.17) 推出 


， 1 nm 
=2i+l, “2 82 


因此 , 由 于 No 是 独立 随机 变量 的 和 , 在 p > 1/2 时 它们 粗略 地 有 相似 的 基 级 , 在 
这 种 情形 由 中 心 极限 定理 推出 , 对 于 很 大 的 n, No 近似 地 有 正 态 分 布 . 特别 地 , 当 
了 = 1/2 时 , No 近似 地 是 均值 为 n? 和 方差 为 


Var(Nosn )=aT 7 3 -So- DF 


i=l j=l j=l tj 


所 以 我 们 有 


的 正 态 分 布 . 
例 4.29( 可 满足 性 问题 ) ”布尔 变量 > 是 只 取 真 或 假 两 个 值 之 一 的 一 个 变量 , 如 果 
zili > 1) 都 是 布尔 变量 , 那么 如 果 zi 是 真 或 rz 是 假 或 zs 是 真 , 则 如 下 形式 的 一 
个 布尔 子 句 


T1 十 元 2 十 Z3 
是 真 . 即 符号 “+ ”的 意思 是 “或 ", 且 如 果 z 是 假 , 则 z 是 真 , 反之 亦 然 . 一 个 布尔 
公式 是 像 这 种 句子 的 一 个 组 合 : 
(zl + FE2) * (zl 十 73) * (Z2 十 元 3) * (元 +E2) * (T1 + 72) 

在 上 面 的 公式 中 , 括号 中 的 项 表示 子 句 , 且 如 果 所 有 的 子 句 都 真 , 则 公式 是 真 , 而 在 
其 他 情形 公式 都 假 . 对 于 一 个 给 定 的 布尔 公式 , 可 满足 性 问题 是 确定 使 公式 结果 是 
真 的 变量 的 值 或 确定 使 公式 绝对 不 是 真 的 变量 的 值 . 例如 , 使 上 面 的 公式 是 真 的 一 
组 变量 值 是 , 取 z1= 真 , z2= 假 , zs= 假 . 
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考察 n 个 布尔 变量 zl, …,zn 的 一 个 公式 , 并 假设 公式 中 的 每 个 子 句 恰 好 包含 
两 个 变量 现在 我 们 介绍 一 个 概率 算法 , 它 将 求 得 满足 公式 的 值 或 者 确定 不 可 能 满 
足 此 公式 的 一 个 大 的 概率 . 首先 , 开始 于 一 组 任意 设置 的 值 , 然后 , 在 每 一 步 选 取 一 
个 值 是 假 的 子 句 , 而 且 随机 地 在 此 子 句 中 选取 一 个 布尔 变量 , 并 改变 它 的 值 . 即 若 
此 变量 值 是 真 , 则 将 它 的 值 改 为 假 , 反之 亦 然 . 若 这 个 新 设置 使 公式 为 真 , 则 停止 ， 


否则 继续 进行 同样 的 改变 方式 , 如 果 你 重复 了 me ( 1 + 4 3 ) 次 还 没有 停止 ,那么 


宣布 此 公式 不 可 能 满足 . 我 们 将 论证 , 如 果 存 在 一 个 可 满足 的 指派 , 那么 这 个 算法 
将 以 非常 近似 于 1 的 概率 求 得 这 个 指派 . 

我 们 先 假定 存在 一 个 为 真 值 的 可 满足 的 指派 , 并 令 x 是 这 样 的 一 个 指派 . 在 这 
个 算法 的 每 一 步 的 值 存在 某 种 指派 . 以 7; 记 在 算法 的 第 j 步 时 , 与 xf 中 的 对 应 值 
一 致 的 n 个 变量 的 个 数 . 例如 , 假设 = 3, 而 of 由 设置 z1=z2=z3= 真 所 组 成 . 如 
果 算 法 在 第 7 步 的 指派 是 zi = 真 , rz = zs = 假 , 那么 Y = 1. 现在 , 在 算法 的 每 一 步 
考察 一 个 不 可 满足 的 子 句 , 于 是 推出 这 个 子 句 的 两 个 变量 中 至 少 有 一 个 值 与 of 中 
的 对 应 值 不 一 致 . 结果 , 当 我 们 在 此 子 句 中 随机 选取 一 个 变量 时 , 则 至 少 以 概率 1/2 
有 六 tl = 六 十 1 而 至 多 以 概率 1/2 有 +1 = 六 一 1 即 独立 于 此 算法 中 以 前 所 
已 知 的 情况 , 每 一 步 设 置 与 of 中 的 值 相 一 致 的 个 数 将 增加 或 减少 1, 而 增加 1 的 概 
率 至 少 是 1/2( 若 两 个 变量 的 值 都 与 xf 中 的 值 不 一 致 , 则 概率 是 1). 从 而 , 即使 过 程 
(i > 0) 本 身 不 是 马尔 可 夫 链 (为 什么 不 是 ?), 直观 上 显然 地 , 为 得 到 ox 的 值 所 需 
要 的 算法 步 数 的 期 望 和 方差 将 少 于 或 等 于 在 4.5.2 节 中 的 马尔 可 夫 链 从 状态 0 到 状 
态 n 的 转移 次 数 的 期 望 和 方差 . 因此 , 如 果 因 为 此 算法 找到 了 一 组 与 xf 不 同 的 可 


满足 值 而 没有 终止 , 它 将 在 期 望 时 间 至 多 为 n? 且 在 标准 差 至 多 为 wf 的 范围 内 
终止 . 此 外 , 由 于 当 n 很 大 时 , 这 个 马尔 可 夫 链 从 状态 0 到 状态 n 的 时 间 近 似 地 是 
正 态 的 , 我 们 可 以 相当 肯定 , 一 个 可 满足 的 指派 将 在 n? 十 4 步 中 达到 . 从 而 ， 


如 果 算法 在 此 步 数 后 还 没有 找到 可 满足 的 指派 , 那么 我 们 可 以 以 大 概率 肯定 并 不 存 
在 可 满足 的 指派 . 

我 们 的 分 析 也 天 清楚 了 为 什么 我 们 假定 在 每 个 子 句 中 只 有 两 个 变量 , 因为 如 果 
在 一 个 子 句 中 有 k(k > 2) 个 变量 , 那么 因为 任意 一 个 目前 不 可 满足 的 子 句 可 能 只 有 
一 个 不 正确 的 设置 , 一 个 随机 选取 其 值 改变 的 变量 可 能 只 以 概率 1/k 增加 与 of 中 
相 一 致 的 值 的 个 数 , 所 以 我 们 只 可 能 从 先 验 马尔 可 夫 链 的 结果 得 出 结论 : 得 到 与 以 
中 的 值 的 平均 时 间 是 的 一 个 指数 函数 , 当 n 很 大 时 , 这 并 不 是 一 个 有 效 的 算法 .上 
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4.6 ”在 暂 态 停留 的 平均 时 间 


现在 考察 一 个 有 限 状态 马尔 可 夫 链 , 并 假设 其 状态 都 标 以 一 个 数 , 因而 以 了 = 
{1,2,…,t} 记 其 暂 态 集 . 令 

Ms Ps “7 Ps 
i i -i 
Py Pa … Pe 
并 注意 由 于 Pr 特 指 只 从 暂 态 到 暂 态 的 转移 概率 , 其 某 些 行 的 和 小 于 1( 否 则 了 将 
是 一 个 状态 闭 集 ). 

对 于 暂 态 i 和 j, 以 si 记 给 定 开始 在 状态 i 的 马尔 可 夫 链 在 状态 ; 的 平均 时 
段 数 . 如 果 i=j, 令 5 = 1, 而 在 其 他 情形 , 令 它 为 0. 取 条 件 于 初始 转移 得 到 


t 
Si = 6 + YD Pieskj 一 5 十 》 Poesky (4.18) 
大 ll 


其 中 最 后 的 等 式 是 由 于 不 可 能 从 一 个 常 返 态 转移 到 暂 态 ， 从 而 当 kk 是 常 返 态 时 
3kj = 0. 


以 5S 记分 基 为 sij(i,j = 1,…,t) 的 矩阵 . 即 


Pr 
El [5 4 
| 
方程 (4.18) 可 以 用 和 矩阵 记号 写 为 
S=T+PrS 
其 中 工 是 上 + 阶 单位 矩阵 . 因为 上 面 的 方程 等 价 于 
(TI- Pr)S = 工 
在 两 边 乘 以 (I - Pr)-!, 我 们 得 到 
S=(I- Pr)”! 
即 sij(iE T,j eT) 可 以 由 矩阵 工 - Pr 求 逆 得 到 (这 个 矩阵 的 逆 的 存在 性 是 容易 
证 明 的 ). 
例 A 考察 p= 0.4 和 =7 的 赌 徒 破产 问题 . 开始 有 3 个 单位 (财产 ), 确定 


(a) 赌 徒 有 5 个 单位 的 总 时 间 的 期 望 . (b) 赌 徒 有 2 个 单位 的 总 时 间 的 期 望 
解 ” 特 指 Pi(i,j e{l,2,3,4,5,6}) 的 矩阵 Pr 如 下 : 
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对 于 工 - Pr 求 池 有 

1.6149 1.0248 0.6314 0.3691 0.1943 0.0777 
1.5372 2.5619 1.5784 0.9228 0.4857 0.1943 
1.4206 2.3677 2.9990 1.7533 0.9228 0.3691 
1.2458 2.0763 2.6299 2.9990 1.5784 0.6314 
0.9835 1.6391 2.0763 2.3677 2.5619 1.0248 
0.5901 0.9835 1.2458 1.4206 1.5372 1.6149 


S=(I- Pr)-!= 


因此 
s3,5 = 0.9228， sa2 = 2.3677 o 
对 于 ie 7T,j ET, fi 等 于 给 定 初始 状态 为 i 的 马尔 可 夫 链 最 终 转移 到 状态 j 
的 概率 , 它 可 以 容易 地 由 Pr 确定 . 为 了 确定 其 关系 , 我 们 先 对 是 否 最 终 进入 状态 7 
取 条 件 以 推导 一 个 st 的 表达 式 . 这 引出 
5 二 [在 j 的 时 间 | 开始 在 i, 最 终 转移 到 j]fij 
+E[ 在 了 的 时 间 | 开始 在 i, 水 不 转移 到 j](1 - fij;) 
= (6 + sj)fi + 65i(1 — fii) 
= 65i + fj 
由 于 s;; 是 给 定 从 状态 i 出 发 最 终 进 入 j 时 停留 在 状态 j 的 附加 时 段 个 数 的 期 望 . 
求解 上 面 的 方程 有 


Sij — 0ij 


后 三 


Sjj 
例 4.31 在 例 4.30 中 , 赌 徒 最 终 有 财富 1( 单 位 ) 的 概率 是 多 少 ? 
解 ” 由 于 ss = 工 4206 和 sl = 1.6149, 于 是 


fa1 = -2 = 0.8797 
S11 


作为 检查 , 注意 f3,1 正 是 开始 于 3 的 赌 徒 在 到 达 7 以 前 到 达 1 的 概率 . 也 就 是 , 此 
赌 徒 的 财富 将 在 增加 4 以 前 减少 2 的 概率 , 这 是 开始 于 2 的 赌 徒 在 到 达 6 以 前 破 


产 的 概率 . 所 以 1— (0.6/0.4)? 


J (0.6/0.4)5 


= 0.8797 
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它 与 我 们 早先 的 答案 一 致 . 国 

假设 我 们 想 要 知道 马尔 可 夫 链 进入 某 些 状态 集合 4 的 平均 时 间 , 4 不 必 是 常 
返 态 的 集合 . 我 们 可 以 通过 置 4 中 的 所 有 的 状态 为 吸收 态 将 这 个 问题 化 简 为 前 面 
的 情形 . 即 重 置 4 中 的 状态 的 转移 概率 , 使 它 满足 


Pi=1, ieA 1 


这 就 将 4 中 的 状态 变换 为 常 返 态 , 并 将 4 外 最 终 可 能 转移 到 A 内 的 状态 变换 为 暂 
态 . 于 是 , 可 以 使 用 前 面 的 方法 . 


4.7 分 支 过 程 


这 一 节 我 们 考察 称 为 分 支 过 程 的 一 类 马尔 可 夫 链 , 在 生物 学 、 社 会 学 和 工程 科 
学 中 , 它 有 各 种 形式 的 广泛 应 用 . 

考察 一 个 总 体 , 它 由 能 产生 同类 型 后 代 的 个 体 所 组 成 . 假设 每 个 个 体 在 其 生命 
结束 时 , 以 概率 已 (j > 0) 产生 了 个 后 代 , 它们 独立 于 其 他 个 体 所 产生 的 后 代 的 个 
数 . 我 们 假设 对 于 一 切 了 > 0 有 万 < 1. 将 最 初 的 个 体 数 记 为 Xo, 称 为 第 零 代 的 大 
小 . 所 有 第 零 代 的 后 代 组 成 第 一 代 , 它们 的 个 数 记 为 X1. 一 般 地 , 以 Xn 记 第 n 代 
的 大 小 . 由 此 推出 {Xn,n > 0} 是 一 个 以 非 负 整数 集合 为 状态 空间 的 马尔 可 夫 链 . 

由 于 显然 有 Poo = 1, 转移 状态 0 是 常 返 态 . 此 外 , 若 Po > 0, 则 其 他 状态 都 是 
暂 态 . 这 是 由 于 Pio = Pa, 它 表明 开始 有 i 个 个 体 时 存在 一 个 至 少 为 矶 的 正 概率 
使 最 终 不 再 有 后 代 . 此 外 , 由 于 暂 态 的 任意 有 限 集 {1,2,…,n} 只 能 有 限 次 地 被 访 
问 , 这 就 导出 重要 的 结论 : 如 果 Po > 0, 总 体 或 者 灭绝 , 或 者 趋 于 无 穷 . 

以 


记 单 个 个 体 的 后 代 个 数 的 均值 . 令 
= 0p 
j=0 
为 单个 个 体 产生 的 后 代 个 数 的 方差 . 
假设 Xo = 1, 即 初始 时 有 一 个 个 体 . 下 面 计算 E[X。] 和 Var(Xn), 首先 可 以 写 
出 


其 中 Zi 表示 第 n 一 1 代 的 第 i 个 个 体 的 后 代 的 个 数 . 取 条 件 于 X-1, 我 们 得 到 
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了 E[Xn] = E[E[Xn|Xn-1]] 


| 


= E[Xn-_i4] 
= 可 及 司 
这 里 我 们 用 了 E[2 = 人 由 于 E[Xo] = 1, 由 上 面 导出 
E[X1]=%, 
E[X2] = uE[X1] = p22 


ELXn] = AE[X 1] = 1" 


类 似 地 , Var(Xn) 可 以 用 条 件 方差 公式 
Var(Xn) = E[Var(Xn|Xn_1)] + Var(E[Xn|Xn_1)) 
得 到 ， 现 在 , 给 定 Xn-1 后 ,Xn 正 是 Xn-1 个 独立 随机 变量 的 和 , 每 个 具有 分 布 
{ 已 ,7 > 0}. 因此 ， 
E[Xn|Xn_1] = Xn_ip, Var(Xn|Xn 1) = Xn_102 
再 由 条 件 方差 公式 导出 
Var(Xn) = E[Xn_107] + Var(Xn im) 
=02p"1 + p?Var(Xn-1) 
= 0 + po p+ pVar( Xn_2)) 
= 0 (p™ + pn) + pVar(Xn-2) 
一 oz(n tp") + po p+ pVar(Xn-3)) 
=02(p™ +p + p+) + pe Var(Xn-3) 
1 一 .…. 
一 0 二 站 二 二 Var(Xo) 
= tp + + pm 2) 


所 以 ee 
2 mn 一 1 2 
wn (全 )， A (4.19) 


mo2， 车 p=IL 
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以 m 记 总 体 最 终 灭绝 的 概率 (在 假定 Xo = 1 下 ). 更 加 正式 地 ， 
T0 一 ,im P{Xn =0|Xo=1} 


确定 ro 的 值 的 问题 , 首先 是 由 高 尔 顿 (Galton) 在 1889 年 研究 家 族 姓氏 消失 时 提 
出 的 . 1 
我 们 首先 注意 如 果 J < 1, 则 mo = 1. 这 是 因为 


"=BXn] = iP{Xn =j} > D1:P{Xn =j}=P{Xn >1} 
j=1 j=1 


由 于 当 j<1 时 jy" 一 0, 所 以 P(Xn > 1) 一 0, 因 此 P(Xn =0) 一 1. 
事实 上 , 即使 k= 1 也 可 以 证 明 ro = 1. 而 当 人 > 1 时 , 有 ro <1. 一 个 确定 ro 
的 方程 可 以 通过 取 条 件 于 初始 个 体 的 后 代 的 个 数 推导 如 下 : 


0 =P{ 总 体 灭绝 } = Pf 总 体 灭绝 Xi 一 中 请 
j=0 


现在 给 定 Xi = j, 总 体 最 终 灭绝 当 且 仅 当 从 第 一 代 成 员 开 始 的 j 个 家 庭 中 的 每 一 
个 都 灭绝 . 由 于 每 个 家 庭 假定 为 独立 地 行动 的 , 并 且 由 于 每 个 特定 的 家 庭 灭 绝 的 概 
率 正 是 ro, 这 就 导致 
P{ 总 体 灭绝 |Xi = 站 = 吕 

从 而 mo 满足 总 
加 = ,nD (4.20) 

j=0 
事实 上 , 当 /> 1 时 , 可 以 证 明 mo 是 满足 方程 (4. 20) 的 最 小 正解 . 
例 4.32 若 忆 =1/2,P=1/4, 忆 = 1/4, 确定 mo. 


3 
解 由 于 /= 卫 委 1 所 以 mo 一 1 更 
例 4.33 车 忆 =1/4,P=1/4, 忆 = 1/2, 确定 ro. 
解 ro 满足 ee 
a a 270 
从 而 


272 一 3ro 二 1=0 
这 个 二 次 方程 的 最 小 的 正解 是 ro = 1/2. 国 
例 4.34 ”在 例 4.32 和 例 4.33 中 ,如果 初始 时 由 n 个 个 体 组 成 , 总 体 灭绝 的 概率 是 
多 少 ? 
解 ” 因 为 总 体 灭绝 当 且 仅 当初 始 代 的 每 个 成 员 的 家 庭 都 灭绝 , 要 求 的 概率 是 78. 对 
例 4.32, z = 1, 而 对 例 4.33, 3 = (1/2)". [J 
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4.8 时间 可 逆 的 马尔 可 夫 链 


考察 一 个 具有 转移 概率 P; 和 平稳 概率 ri 的 平稳 的 遍历 马尔 可 夫 链 ( 即 一 个 
已 经 长 时 间 运 行 的 遍历 的 马尔 可 夫 链 ), 假设 它 开始 于 某 个 时 间 , 我 们 沿 时间 的 反 向 
追踪 其 状态 序列 . 即 从 时 间 n 开始 , 考察 状态 序列 Xn, Xn -1, Xn-2,…. 这 个 状态 序 
列 显示 它 本 身 是 一 个 马尔 可 夫 链 , 其 转移 概率 Qi 定义 为 
Qi = P{Xm = jlXm+t1=} 
_ P{Xm =j,Xm+1 = 让 


P{Xm+1 = 让 
_ P{Xm =j}P{Xm+ =ilXm = 四) 
了 P{Xm+l= 计 
TP 


mi 
为 证 明 这 个 逆向 的 过 程 确实 是 马尔 可 夫 链 , 我 们 必须 验证 
P{Xm = jlXm+1 =i, Xm+2, Xm+3,.**} = P{Xm = j|Xm+1 =i} 


为 了 看 清楚 确实 如 此 , 假设 目前 的 时 间 是 m + 1. 现在 , 由 Xo, Xi,X2,… 是 马尔 可 
夫 链 推出 给 定 目前 状态 为 Xm+1 时 , 将 来 的 状态 Xm+2, Xm+s,… 的 条 件 分 布 独立 
于 过 去 状态 Xm. 然而 , 独立 性 是 一 种 对 称 的 关系 ( 即 若 4 独立 于 B, 则 B 独立 于 
4), 从 而 这 就 表明 给 定 Xm+1 时 , Xm 独立 于 Xm+2,Xm+3,…. 这 正 是 我 们 必须 验 
证 的 . 
于 是 , 逆向 的 过 程 也 是 一 个 马尔 可 夫 链 , 其 转移 概率 为 
Qy = 瑟 生 

如 果 对 于 一 切 i,j 都 有 Qi = Bi， 那么 这 个 马尔 可 夫 链 称 为 时 间 可 逆 的 . 时 间 可 北 
性 的 条 件 即 Qi; = Pi;, 也 可 以 表示 为 

TiPy 一石 Pi， 对 于 一 切 i,j (4.21) 


1 

方程 (4.21) 的 条 件 可 以 陈述 为 , 对 于 一 切 状态 i,j, 过 程 从 i 到 j 的 转移 率 ( 即 zi;Pi;) 
等 于 从 7 到 i 的 转移 率 ( 即 xjPii). 值得 注意 的 是 这 显然 是 时 间 可 逆 性 的 一 个 必要 
条 件 , 因为 一 个 从 i 到 j 的 逆向 转移 等 于 从 j 到 i 的 正 向 转移 . 就 是 说 , 如 果 Xn = i 
且 Xm-1 = 小 那么 如 果 我 们 向 后 看 , 就 观察 到 从 i 到 j 的 一 个 转移 , 而 如 果 我 们 向 
前 看 , 就 观察 到 从 7 到 i 的 一 个 转移 . 于 是 , 正 向 过 程 从 7 到 i 的 转移 率 总 等 于 反 
向 过 程 从 i 到 7 的 转移 率 ; 如 果 时 间 是 可 逆 的 , 它 必须 等 于 正 向 过 程 从 i 到 j 的 转 
移 率 . 


Ti 
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如 果 我 们 能 够 找到 加 起 来 等 于 1 且 满 足 方程 (4.21) 的 一 列 非 负 数 , 那么 就 能 推 
出 这 个 马尔 可 夫 链 是 时 间 可 逆 的 , 而 且 这 些 数 表示 其 极限 概率 . 之 所 以 如 此 , 是 由 于 


ZiPs = zjPis， 对 于 一 切 j》 zi=1 (4.22) 
然后 对 i 求 和 导出 | 


1 


DziPy = DP 一 Th > =1 
上 1 


又 因为 极限 概率 ri 是 上 述 方程 的 唯一 解 , 从 而 推出 对 于 所 有 的 i 有 zi = ti 
例 4.35 ”考察 状态 为 0,1,…,M 和 转移 概率 为 
Pin=a=1-Pi, i=1,.…,M-1, 
一 五 
Pam =aM =1— Pum-1 


的 随机 游 动 ， 不 需要 作 任 何 计算 就 可 以 论证 这 个 只 能 从 一 个 状态 转移 到 它 的 最 相 
邻 状态 的 马尔 可 夫 链 是 时 间 可 道 的 . 这 是 因为 从 i 到 ii + 1 的 转移 数 必须 总 是 在 从 
1 二 1 到 ;的 转移 数 相差 1 以 内 . 这 是 由 于 任何 两 次 从 i 到;i+ 1 的 转移 间 必 须 有 一 
次 从 i+1 到; 的 转移 (而 且 相反 也 对 ), 因为 从 一 个 较 高 的 状态 再 进入 i 必须 经 过 
状态 i+1. 因此 推出 从 i 到 i+ 1 的 转移 率 等 于 从 i +1 到 i 的 转移 率 , 所 以 此 过 程 
是 时 间 可 逆 的 . 

我 们 可 以 很 容易 地 通过 对 每 个 状态 i = 0,1,…,M -1 将 从 i 到 i+l 的 转移 
率 与 从 ;+1 到 i 的 转移 率 取 成 相等 以 得 到 极限 概率 . 这 样 导出 


Toao = Ti(1l 一 an)， 


Pi1=a0 


Tlal = 72(1 一 a2)， 


Tii 一 Ti+li(1 一 ai+l)，i 一 01……M 一 1 


用 wo 作为 参数 求解 , 导出 
ao yy a alao 
人 Se (1 一 ao)(1 一 am 


N= 


1—a 1 一 a2 


而 一 般 地 

Qi-1'"*Q0 
Ga oa) 
由 于 学 0 mi = 1, 我 们 就 得 到 


i= i=1,2,.…,M 


+ 人 
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因此 
M -1 
二 
mo 一 | (4.23) 
Qi-L ao 


i=1,.…,M (4.24) 


例如 , 如 果 ai = a, 那么 


而 且 , 一 般 地 


其 中 
er 图 


例 4.35 的 另 一 个 特例 是 由 物理 学 家 P. 埃 伦 费 斯 特 和 T. 埃 伦 费 斯 特 提出 的 描 
述 分 子 运动 的 坛子 模型 : 假设 M 个 分 子 分 布 在 两 个 坛子 中 , 在 每 个 时 间 点 随机 地 
选取 一 个 分 子 , 从 它 所 在 的 坛子 移出 并 放 进 另 一 个 坛子 中 . 坛子 1 中 的 分 子 数 是 例 
4.35 中 的 马尔 可 夫 链 的 特殊 情形 , 有 
Mo-i 
es 
因此 , 利用 方程 (4.23) 与 方程 (4.24), 这 种 情形 的 极限 概率 是 
M -1 
(M-j+D):…(M- DM 
nr | 


ao 一 i=0,1,.……,M 


j=1 


其 中 我 们 用 了 恒等式 


因此 , 由 方程 (4.24) 得 到 
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因为 上 式 正 是 二 项 概率 , 这 就 推出 , 在 长 程 中 M 个 球 的 每 一 个 的 位 置 是 独立 的 , 而 
且 每 一 个 都 等 可 能 地 在 其 中 一 个 坛子 中 . 这 是 非常 直观 的 , 因为 如 果 我 们 只 关注 任 
意 一 个 球 , 显然 它 的 位 置 独立 于 其 他 球 的 位 置 (因为 不 管 其 他 M 一 1 个 球 在 哪里 ， 
所 考察 的 球 在 每 一 步 都 以 概率 1/M 移动 ), 而 由 对 称 性 , 它 等 可 能 地 在 其 中 一 个 坛 
了 于 中; 

例 4.36 ”考察 任意 一 个 连通 图 (定义 参见 3.6 节 ), 对 于 每 个 弧 人 结合 以 一 个 数 
wij， 一 个 这 种 图 的 例子 由 图 4.1 给 出 . 现在 考察 一 个 以 如 下 方式 从 顶点 移动 到 顶 
点 的 质点 : 如 果 在 任意 时 间 质 点 停 在 顶点 i, 那么 下 一 次 它 以 概率 Pi; 移 向 顶点 j， 
其 中 


Wij 


Pi = 一 
Dj ui 


图 4.1 带 权重 的 弧 的 一 个 连通 图 
而 如 果 (i,j) 不 是 一 个 弧 , wii = 0. 例如 , 在 图 4.1 中 的 图 , Piz = 3/(3 二 1 十 2) = 1/2. 


这 时 时 间 可 北 性 方程 


iP = miPii 
简化 为 部 wy 
深 2 Way 人 Di wii 
或 者 , 等 价 地 , 由 于 wi; = wji 
ms Ny 
Zr Dew 


它 等 价 于 


mi 
=cC 马 mi= cD wi 
pa 或 ti j 


本 

或 者 , 由 于 1 = ;mi 得 到 
二 Wij 

2 2 wis 

因为 由 这 个 方程 给 出 的 zi 满足 时 间 可 道 性 方程 , 这 就 推出 过 程 对 此 极限 概率 是 时 

间 可 道 的 . 


Ti 一 
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对 于 图 4.1 中 的 图 , 我 们 有 
6 


Fl 一 


3 _6 _ 5 _12 关 
32， 有 

如 果 我 们 对 于 状态 为 0,1,…,M 的 任意 一 个 马尔 可 夫 链 , 试图 求解 方程 (4.22)， 
通常 并 不 存在 解 . 例如 , 由 方程 (4.22) 


miPy =zPn, zkPej = 本 Ps 


Tr2 一 


蕴涵 ( 若 PiPk > 0) 
Li 
ze PK 


一 般 地 , 它 不 必 等 于 Pki/Pix. 于 是 我 们 看 到 时 间 可 逆 性 的 一 个 必要 条 件 是 
PuePuPi = PyPixPut， 对 于 一 切 i,j,k (4.25) 


它 等 价 于 如 下 陈述 : 开始 在 状态 i, 路 径 i 一 上 一 j 一 i 与 反 向 路 径 i 一 j 一 k 一 i 
有 相同 的 概率 . 为 了 理解 这 里 的 必要 性 , 注意 时 间 可 逆 性 蕴涵 着 从 i 到 上 到 j 到 i 
的 一 系列 转移 发 生 的 速率 必须 等 于 从 i 到 j 到 此 到 i 的 转移 发 生 的 速率 (为 什么 ?)， 
从 而 必须 有 
miPir PryPi = miPij Pj Pei 

它 在 m > 0 时 蕴涵 方程 (4.25). 

事实 上 , 我 们 可 以 证 明 下 面 的 定理 . 
定理 4.2 对 于 只 要 Pi = 0 就 有 Pi; =0 的 遍历 的 马尔 可 夫 链 , 它 是 时 间 可 北 的 
当 且 仅 当 如 果 它 开始 在 状态 i, 任意 一 个 回 到 守 的 路 径 与 它 的 反 向 路 径 有 相同 的 概 
率 . 即 如 果 对 于 一 切 状态 记 订 ,…,ik 有 


六 PP (4.26) 


证 明 我们 已 经 证 明了 必要 性 . 为 了 证 明 充分 性 , 固定 状态 i 和 j, 并 将 方程 (4.26) 
改写 成 
PaPiia** PsPii = PyPi*** Pa 
将 上 式 对 于 所 有 的 状态 1,…,ix 求 和 , 导出 
, PHP = PyPk+! 
令 上 一 o0 导出 
TP = Pym 
这 就 证 明了 定理 . 3 
例 4.37 ”假设 给 定 了 标号 1 到 nn 的 nn 个 元 素 的 集合 , 将 它们 排列 成 某 个 有 序 的 列 
表 . 在 每 个 时 间 单 位 , 有 一 个 需求 即 从 这 些 元 素 中 取出 一 个 , 元 素 i 被 需求 (独立 于 
过 去 ) 的 概率 是 已 . 元 素 经 过 需求 后 放 回 , 但 是 不 必 在 原来 的 位 置 . 事实 上 , 我 们 假 
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设 被 需求 的 元 素 向 列表 的 首位 移 近 一 个 位 置 . 例如 , 如 果 现 在 的 列表 次 序 是 1, 3, 4， 
2, 5 而 元 素 2 被 需求 , 那么 新 的 次 序 变 为 1, 3, 2, 4, 5. 我 们 想 要 知道 被 需求 的 元 素 
的 长 程 平均 位 置 . 

对 于 任意 给 定 的 概率 向 量 已 = (Pi,…, Pn), 上 面 的 情形 可 以 用 有 nl 个 状态 的 
马尔 可 夫 链 建 模 , 在 任意 时 间 的 状态 是 这 个 时 候 的 列表 的 次 序 . 我 们 将 证 明 这 个 马 
尔 可 夫 链 是 时 间 可 逆 的 , 并 用 此 证 明 当 使 用 移 近 一 个 位 置 的 规则 时 , 所 需求 元 素 的 
平均 位 置 小 于 使 用 总 是 将 需求 元 素 移 至 队 首 的 规则 的 情形 . 当 使 用 移 近 一 个 位 置 的 
规则 时 产生 的 马尔 可 夫 链 的 时 间 可 逆 性 容易 地 得 自 定理 4.2. 例如 , 假设 = 3 并 考 
察 从 (1,2,3) 到 它 自 己 的 如 下 路 径 : 

(1,2,3) 一 (2,1,3) 一 (2,3,1) 一 (3,2,1) — (3,1,2) 一 (1,3,2) — (1,2, 3) 

按 向 前 方向 的 转移 概率 的 乘积 是 

PPyPsPiPiP = PP?P? 
而 按 反 方向 的 转移 概率 的 乘积 是 

PPyPy PPiP, = PP?P? 
因为 一 般 的 结果 得 自 差不多 相同 的 方式 , 此 马尔 可 夫 链 是 时 间 可 逆 的 (至 于 正式 的 
论证 , 注意 如 果 以 fi 记 在 路 径 上 元 素 i 向 前 移动 的 次 数 , 那么 因为 路 径 从 一 个 固定 
的 状态 出 发 并 回 到 它 自己 , 由 此 推出 元 素 i 也 向 后 移动 了 fi 次. 所 以 , 由 于 元 素 i 向 
后 移动 的 步 数 就 是 它 在 反 向 路 径 向 前 移动 的 次 数 , 就 推出 对 于 沿 此 路 径 和 其 反 向 路 
径 的 转移 概率 的 乘积 都 等 于 

Te 


其 中 ri 等 于 元 素 i 在 第 一 个 位 置 的 次 数 , 而 且 路 径 (或 反 向 路 径 ) 并 不 改变 状态 ). 
对 于 1,2,…,n 的 任意 一 个 排列 宁 ,i2,… ,in, 以 r(iniz in) 记 在 移 近 一 个 
位 置 的 规则 下 的 极限 概率 . 由 可 道 性 , 对 于 一 切 排列 都 有 
P 


tl 


现在 被 需求 元 素 的 平均 位 置 可 以 表示 为 (如 在 3.6.1 节 中 ) 
平均 位 置 = 》 PE{ 元 素 ; 的 位 置 } 


下 (7 


= 已 |1+》 P{ 元 素 7 在 i 前 } 
1 复 


=1+》 ,PP{e; 先 于 ei} 


i Fi 
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=1+ > [PP{ei 先 于 ei} + PPP{ei 先 于 ej] 


i<j 
=1+》 [PP{ei 先 于 ei} 十 PP(1 一 Pfe; 先 于 ei})] 
i<j 
=1+D_(P—P)Pfe; 先 ei}+ DP 
i<j i<j 
因此 , 为 了 使 所 需求 的 元 素 的 平均 位 置 最 小 ( 即 最 前 ), 我 们 就 要 在 P > Pi 时 使 
Pei 先 于 ei} 尽量 大 , 而 在 P: > PP 时 使 它 尽量 小 . 现在 , 在 移 至 队 首 的 规则 下 , 我 
们 在 3.6.1 节 中 证 明了 


Pler 先 a} = 万 和 


(由 于 在 移 至 队 首 的 规则 下 , 元 素 7 先 于 元 素 i 当 上 且 仅 当 对 i 或 7 的 最 后 需求 是 对 j 
的 需求 .) 

所 以 , 为 了 证 明 移 近 一 个 位 置 的 规则 比 移 至 队 首 的 规则 好 , 只 要 证 明 在 移 近 一 
个 位 置 的 规则 下 , 当 P > Ri 时 有 


Pte NF a) > BE 


现在 考察 元 素 i 是 先 于 元 素 j 的 任意 状态 , 例如 ,(…,i,i,…,ik,j，…), 由 相 
继 的 转移 , 利用 方程 (4.27), 我 们 有 


k+l 
看 (一 (&) A hi ki) (4.28) 
了 
例如 
T(1,2,3) = 到 (1， 3,2) = 吴县 rl， 1,2) 
全 Ph Ph 
= 有 RE 2,1) = (人 7(3,2,1) 


现在 , 当 P > Pi 时 , 方程 (4.28) 导出 
Sv < 时 
J 
令 ali,j) = Pf{ei 先 于 ej}, 由 对 i 先 于 j 的 所 有 状态 求 和 , 并 使 用 上 式 , 我 们 得 到 
NN 
ali,j) < Bo 
由 于 a(i,j) =1 一 a(j,), 它 导 出 


a0 > 万 
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因此 , 所 需求 元 素 的 平均 位 置 , 在 移 近 一 ne dh 
更 小 . 
即使 当 过 程 不 是 时 间 可 逆 的 时 候 , 逆向 链 的 概念 也 很 有 用 . 为 了 说 明 这 一 点 ， 
们 先 给 出 下 面 的 命题 , 其 证 明 作为 习题 留 给 读者 来 完成 . 
命题 4.9 ”考察 转移 概率 为 PP; 的 一 个 不 可 约 的 马尔 可 夫 链 . 如 果 我 们 能 够 找到 和 
为 1 的 正 数 列 ti,i > 0, 以 及 一 个 转移 概率 矩阵 @Q = [Qij] 使 
miPi = TQ (4.29) 


那么 Qij 是 逆向 链 的 转移 概率 , 而 Ti 是 原来 的 链 和 逆向 链 两 者 的 平稳 概率 . 
上 述 命题 的 重要 性 在 于 用 反 向 思维 , 有 时 我 们 可 以 猜测 逆向 链 的 本 质 , 然后 再 

用 一 组 方程 (4.29) 得 到 平稳 概率 和 Qi 
例 4.38 照 亮 一 个 房间 必须 有 一 个 灯泡 . 使 用 中 的 灯泡 失效 时 , 就 在 第 二 天 初 换 上 
一 个 新 的 . 如 果 第 n 天 使 用 中 的 灯泡 是 它 启用 的 第 i 天 ( 即 它 现在 的 寿命 是 i), 就 令 
Xn 等 于 i. 例如 , 灯泡 在 第 n 一 1 天 失效 , 那么 一 个 新 的 灯泡 在 第 n 天 初 启用 , 从 而 

Xn = 1. 如 果 我 们 假设 每 个 灯泡 独立 地 以 概率 pi(i > 1) 在 使 用 的 第 i 天 失效 , 那么 
容易 看 到 {Xn,n > 1} 是 马尔 可 夫 链 , 其 转移 概率 如 下 : 

Pl 二 P{ 灯 泡 在 使 用 的 第 i 天 失效 } 
= 了 { 灯 泡 寿 命 = 计 灯 泡 寿 命 > 计 


_ P{L=} 
~ P{L>} 
其 中 工 是 表示 灯泡 寿命 的 随机 变 基 , 满足 P{L = i} = pi. 此 外 ， 
Pin=1-P1 


现在 假设 这 个 链 已 经 运行 了 很 长 时 间 (在 理论 上 是 oo) 并 反 向 地 考察 其 状态 列 ， 
由 于 在 向 前 的 方向 , 状态 总 是 增加 1 直至 到 达 灯 泡 失效 的 年 龄 , 容易 看 到 逆向 链 总 
是 减少 1 直至 它 到 达 1, 而 后 跳 至 一 个 代表 前 一 个 灯泡 的 寿命 (在 真实 的 时 间 ) 的 随 
机 值 . 因此 , 逆向 链 看 起 来 有 转移 概率 

Qii-1=1, i>1; Qii=pi, i>1 
为 了 验证 它 并 同时 确定 平稳 概率 , 我 们 必须 看 到 对 于 上 面 给 出 的 Qi,j, 能 否 找 到 正 
数 {mi} 使 
miPij = TQ 


首先 , 令 j = 1, 并 考察 导出 的 方程 : 
miP1 = MQ 
这 等 价 于 
P{L = 让 


m="mP{L= 让 j 或 m=mP{L> 引 
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对 一 切 i 求 和 导出 
1= Er mY Pp(L> >i}= mEL] 


i=1l 


所 以 , 对 于 上 面 表示 反 向 转移 概率 的 Qij, 平稳 概率 必须 是 


为 了 完成 所 给 的 反 向 转移 概率 和 平稳 概率 的 证 明 , 余下 的 一 切 就 是 证 明 它们 满足 


TiPiitl 一 THIQiHLi 


和 P{L>i} P{L=i}\_ P{L>i+1} 
El[Z] (G- 琵 二 )- EIZ] 
而 这 是 正确 的 , 因为 P{L > 守 }-P{L=ij} =P{L>i+1}. 四 
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令 X 是 一 个 离散 的 随机 向 基 , 它 的 可 能 值 的 集合 是 rij,7 > 1. 令 XX 的 概率 质 
基 函 数 为 P{X = z;}, 7 > 1, 而 且 假 设 我 们 想 对 某 些 特殊 的 函数 h 计算 


09= Elh(X)] = Dh(z)P{X = zi 
j=1 
在 求 函数 h(zj)(; > 1) 的 值 在 计算 上 有 困难 的 情形 , 我 们 常常 转 为 用 模拟 近似 0. 
通常 的 方法 , 称 为 莹 特 卡 罗 方法 ,是 利用 随机 数 生成 概率 质量 函数 为 P{X = zj)} 
(j > 1) 的 独立 同 分 布 部 分 随机 向 基 序 列 XX1, XX2,…, Xn( 至 于 它 如 何 得 以 完成 , 请 
参见 第 11 章 的 讨论 ). 由 强大 数 定律 导出 


,lim a> (4.30) 
随 之 我 们 可 以 取 很 大 的 mu 用 h(Xi)(i = 1,…，,n) 的 平均 值 作为 估计 量 去 估计 0. 
然而 ， 党 党 很 玲 生成 具有 特定 的 概率 质量 画 数 的 随机 向 基 特别 地 , 如 果 基 是 
一 个 (分 基 之 间 有 ) 相依 的 随机 向 基 . 此 外 , 它 的 概率 质量 函数 有 时 取 P{X = zj} = 
Cbj(i > 1) 的 形式 , 其 中 b; 是 指定 的 , 但 是 必须 计算 C, 而 在 很 多 应 用 中 , 用 对 与 
求 和 来 确定 C 在 计算 上 并 不 可 行 . 幸而 , 在 这 种 情形 存在 利用 模拟 估计 9 的 另 一 种 
途径 . 即 不 是 生成 独立 的 随机 向 基 列 , 而 是 生成 一 个 取向 量 值 的 , 上 且 以 P{X = zj;} 
(j > 1) 为 平稳 概率 的 马尔 可 夫 链 和 1:, 入 2,… 的 相继 状态 的 一 个 序列 . 如 果 这 可 以 
做 到 , 那么 由 命题 4.7 推出 方程 (4.30) 仍然 成 立 , 并 且 启 示 我 们 可 用 2 h(Xi)/n 
作为 9 的 一 个 估计 . 
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现在 我 们 说 明 如 何 生成 一 个 具有 任意 平稳 概率 的 马尔 可 夫 链 , 而 此 平稳 概率 可 
以 只 特定 到 一 个 常数 倍数 . 令 b(j)(j = 1,…) 是 其 和 B = 志 沁 ;0) 为 有 限 的 正 数 . 
下 面 的 黑 斯 廷 斯 - 梅 特 罗 波 利 斯 (Hastings-Metropolis) 算法 , 它 可 以 用 于 生成 一 个 时 
间 可 北 的 马尔 可 夫 链 , 使 其 平稳 概率 是 
0) =60)/B, j=1,2,.… ' 

首先 令 Q 是 任意 一 个 取 正 整数 值 的 特定 的 不 可 约 马尔 可 夫 转 移 概率 矩阵 , 以 di, 了 
表示 Q 的 i 行 ; 列 的 元 素 . 现在 按 下 述 方式 定义 一 个 马尔 可 夫 链 {Xn,n > 0}. 当 
Xn = 时 , 生成 一 个 随机 变量 Y 使 P{Y =j} = gq(i,j),j =1,…. 如 果 Y =j, 那么 
令 Xnt1 以 概率 a(i,j) 等 于 j, 而 以 概率 1 - a(i,j) 等 于 i 在 这 些 条 件 下 , 容易 看 
出 状态 序列 构成 一 个 马尔 可 夫 链 , 其 转移 概率 Pj 为 

Pij= qlij)a(i,j)， 若 ji 

Ra = qi) + Dik)(l — ali,k)) 

kA 
mrG)Pi =7(j)Pii， 对 于 j# 

则 这 个 马尔 可 夫 链 将 是 时 间 可 道 的 , 且 具 有 平稳 概率 7(j), 它 等 价 于 


如 果 


(as) = ri) da (4.31) 
但 是 如 果 我 们 取 7() = 6()/B, 并 且 令 
en- ns 
那么 容易 看 出 方程 (4.31) 成 立 . 因为 若 
ln) = a 


则 a(j,i) =1, 随 之 有 方程 (4.31), 而 若 a(i,j) = 1, 则 
,Ti)g(i,j) 
0 = 00 
方程 (4.31) 也 成 立 , 从 而 证 明了 这 个 马尔 可 夫 链 是 时 间 可 道 的 , 且 具 有 平稳 概率 
T(7). 此 外 , 因为 r(7) = 6b(j)/B, 我 们 从 (4.32) 式 看 到 
87)g(7 蕉 
-mL 
它 显示 B 的 值 对 于 确定 这 个 马尔 可 夫 链 并 不 是 必需 的 , 因为 b(j) 的 值 已 经 足够 了 . 
此 外 , 几乎 总 出 现下 面 的 情形 : r(7)(7 > 1) 不 仅 是 平稳 概率 , 而 且 也 是 极限 概率 . ( 事 
实 上 , 一 个 充分 条 件 是 , 对 某 个 i 有 已; > 0.) 
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例 4.39 ”假设 对 于 给 定 的 常数 a, 我 们 要 生成 (1,…,n) 的 所 有 满足 并 六 ;jzj > a 
的 排列 (z1,…,zn) 所 组 成 的 集合 在 .% 上 的 均匀 分 布 . 为 了 利用 黑 斯 廷 斯 - 梅 特 罗 
波 利 斯 算法 , 我 们 需要 在 状态 空间 .7 上 定义 一 个 不 可 约 马尔 可 夫 转 移 概率 矩阵 , 为 
了 定义 它 , 我 们 首先 定义 . 的 元 素 的 “ 相 邻 的 ”概念 , 然后 构造 顶点 集 为 8 的 一 个 
图 . 我 们 先 在 .> 中 每 对 相 邻 的 元 素 间 置 一 个 弧 , 其 中 .9 中 的 任意 两 个 排列 称 为 相 
邻 的 , 如 果 其 中 的 一 个 可 由 另 一 个 经 过 两 个 位 置 的 互 换 得 到 . 即 (1, 2, 3, 4) 和 (1 2， 
4, 3) 是 相 邻 的 , 而 (1, 2, 3, 4) 和 (1, 3, 4, 2) 则 不 是 . 现在 定义 转移 概率 函数 4 如 下 . 
状态 s 的 相 邻 的 顶点 的 集合 定义 为 人 ), 而 |N(s)| 等 于 集合 N(s) 的 元 素 个 数 , 令 


q(s,t) = mm T 车 t€ N(s). 


就 是 说 , 从 s 到 下 一 个 候选 状态 等 可 能 地 是 它 的 任意 一 个 相 邻 的 顶点 . 由 于 要 求 的 
马尔 可 夫 链 的 极限 概率 是 r(s) = C, 所 以 w(t) = 7(s), 从 而 有 
als,t) = min(|N(s)|/IN(t)|, 1) 
即 如 果 马 尔 可 夫 链 的 目前 状态 是 s, 那么 它 的 一 个 相 邻 的 顶点 是 随机 选取 的 , 例如 
t. 如 果 t+ 是 一 个 比 s 有 较 少 相 邻 的 顶点 的 状态 (用 图 论 的 语言 说 , 如 果 顶 点 的 度 
小 于 顶点 s 的 度 ), 那么 下 一 个 状态 就 是 t. 如 若 不 然 , 那么 生成 一 个 (0, 1) 均匀 随机 
变 基 U0, 若 U < |N(s)MIN(b|, 则 下 一 个 状态 是 也 而 在 其 他 情形 则 下 一 个 状态 是 s. 
这 个 马尔 可 夫 链 的 极限 概率 是 r(s) = 1/|.7|, 其 中 |.9| 是 . 中 的 排列 个 数 (是 未 
知 的 ). mn 
黑 斯 廷 斯 - 梅 特 罗 波 利 斯 算法 最 广泛 的 应 用 版 本 是 吉 布 斯 抽样 (Gibbs sampler). 
令 = (入 ，,… ,Xn) 是 一 个 离散 的 随机 向 量 , 具有 只 特定 到 一 个 常数 倍数 的 概率 
质量 函数 p(z), 假设 我 们 要 生成 与 X 同 分 布 的 一 个 随机 向 其 即 我 们 要 生成 具有 
概率 质量 函数 
pz(z) = Co(z) 
的 一 个 随机 向 量 , 其 中 g(z) 已 知 , 但 是 C 未 知 . 应 用 吉 布 斯 抽样 时 假定 对 于 任意 i 
和 zj 关羽 我 们 能 够 生成 一 个 具有 概率 质量 函数 
P{X=27}=P{Xi:=z|X; = 7,1} 

的 随机 变量 X, 它 通 过 黑 斯 廷 斯 - 梅 特 罗 波 利 斯 算法 运行 在 状态 为 2 = (Z1,…, zn) 
的 一 个 马尔 可 夫 链 上 , 其 转移 概率 由 下 面 定 义 ， 只 要 目前 的 状态 是 z, 就 等 可 能 地 

1,…,n 中 任意 选取 一 个 作为 坐标 . 如 果 选 取 了 坐标 i, 那么 就 生成 了 一 个 具有 概 
率 质量 函数 P{X = z} = P{Xi = zi|Xi = z 洒 关 计 的 随机 变量 X. 如 果 X = z， 
那么 就 将 状态 y = (zl，……zi-lzzitb yzn) 考虑 为 下 一 个 候选 状态 . 换 句 话说 ， 
对 于 给 定 的 > 和 y, 吉 布 斯 抽样 用 


lprx -Xi 一 p(y) 
qz,y) = 5P{Xi = 7|X; = 77,7#i} = [=z 


4.10 马尔 可 夫 决 策 过 程 ”209 


的 黑 斯 廷 斯 - 梅 特 罗 波 利 斯 算法 . 
因为 我 们 需要 的 极限 质量 函数 是 p, 所 以 由 方程 (4.32) 看 到 接受 y 为 新 状态 的 


ue p(y)a(y, 2) p(y)p(z) 

on) = min (HE) ) = min (BEG! ) =1 
因此 , 当 使 用 吉 布 斯 抽样 时 , 候选 状态 总 被 接受 为 链 的 下 一 个 状态 . 
例 4.40 ”假设 我 们 需要 生成 以 原点 为 中 心 且 半径 为 1 的 圆周 上 均匀 分 布 的 个 
点 , 当 条 件 事件 的 概率 小 时 , 取 条 件 于 没有 两 个 点 彼此 的 距离 在 d 以 内 的 事件 . 这 
可 以 利用 吉 布 斯 抽样 , 即 开始 取 这 个 圆周 上 具有 没有 两 个 点 彼此 的 距离 在 d 以 内 的 
性 质 的 任意 ni 个 点 zl, zz,……, zn, 而 后 等 可 能 地 在 值 1, 2, …,n 的 任意 一 个 中 生 
成 一 个 值 I. 然后 继续 在 圆周 上 生成 一 个 随机 的 点 直至 得 到 了 一 个 除了 zz 以 外 的 
其 他 -1 个 距离 不 在 d 以 内 的 点 为 止 . 这 时 , 用 这 个 点 代替 zr, 并 重复 这 样 的 运 
算 . 经 过 大 量 的 重复 这 样 的 算法 , n 个 点 的 集合 就 近似 地 有 所 要 求 的 分 布 . 图 
例 4.41 令 Xi(i = 1,…,n) 是 分 别 具 有 参数 Xi 的 独立 指数 随机 变 基 . 令 3 = 
三” ,Xe 假设 对 于 大 的 正常 数 c, 我们 需要 生成 在 条 件 5 > c 下 的 随机 向 最 X 二 
(X1,…,Xn). 即 我 们 需要 生成 密度 函数 为 


ih Ee | 一 Nizi 总 
flz1, 7") = ptsso le i 0 mi>e 


i=1 


的 随机 向 基 的 值 . 这 容易 做 到 , 只 要 从 一 个 满足 ri > 0i = 1 om Zi >c 的 
初始 向 基 = = (z1,…,zn) 开始 . 然后 生成 一 个 等 可 能 地 是 1,…,n 的 任意 一 个 的 
随机 变 基 I. 下 一 步 , 生成 一 个 指数 随机 变量 X, 使 其 在 事件 关 志 ;yi z; > c 的 条 
件 下 参数 为 1. 最 后 的 步骤 要 求 在 超过 c-- 盖 izr zi 的 条 件 下 生成 一 个 指数 随机 变 
基 的 值 , 它 容 易 通过 利用 如 下 事实 做 到 , 即 指数 变量 在 大 于 一 个 正常 数值 的 条 件 下 
的 条 件 分 布 与 这 个 值 加 上 该 指数 变 基 的 分 布 相同 . 因此 , 为 了 得 到 X, 首先 生成 一 
个 参数 为 X 的 指数 随机 变 基 Y, 接着 令 


X=Y+ ( 一 5s) 
#1 
其 中 a+ = max(a,0). 然后 值 rr 应 该 重新 置 为 X, 并 开始 算法 的 新 一 步 迷 代 ，。 国 


注 由 例 4.40 与 例 4.41 看 出 , 虽然 吉 布 斯 抽样 的 理论 的 介绍 是 假定 了 生成 的 随机 
变量 的 分 布 是 离散 的 , 而 当 分 布 是 连续 时 也 是 成 立 的 . 
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考察 一 个 过 程 , 它 在 离散 时 间 点 上 的 观测 是 标号 为 1,…,M 的 M 个 可 能 的 状 
态 中 任意 一 个 . 在 观测 到 过 程 的 状态 后 必须 选取 一 个 动作 , 而 我 们 以 A 记 所 有 可 能 
的 动作 的 集合 , 并 且 假 定 它 是 有 限 集 . 


时 
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如 果 过 程 在 时 间 n 处 在 状态 i, 并 且 选 取 了 动作 a, 则 系统 的 下 一 个 状态 由 转移 
概率 Pi;(a) 确定 . 如 果 我 们 以 X 记过 程 在 时 间 n 的 状态 , 以 on 记 在 时 间 ”选取 
的 动作 , 那么 上 面 就 等 价 于 

P{Xn+1 = j|Xo,ao0, X1,a1,.……, Xn =i,an = a} = Pi(o) 


于 是 , 转移 概率 只 是 目前 的 状态 和 随后 的 动作 的 函数 
将 选取 动作 的 一 个 规则 称 为 一 个 策略 . 我 们 局 限于 下 述 形式 的 策略 , 即 在 任意 
时 间 他 们 指定 的 动作 只 依赖 于 当时 过 程 的 状态 (而 不 依赖 于 过 程 以 前 的 任何 状态 和 
动作 ). 然而 , 我 们 容许 一 个 策略 是 “随机 化 " 的 , 即 可 以 按 概率 分 布 选取 动作 . 换 句 
话说 , 一 个 策略 8 是 一 个 数 的 集合 8 = {6i(a),a se 4,i = 1,…,M), 即 如 果 过 程 在 
状态 二 则 以 概率 Bi(a) 选取 动作 a. 当然, 我 们 需要 假定 
0< Bi(a) < 1， 对 于 一 切 ia 


pi(a) = 1， 对 于 一 切 宗 


在 任意 给 定 的 策略 8 下 , 状态 序列 {Xn,n = 0,1,…} 构成 一 个 马尔 可 夫 链 , 其 
转移 概率 已 i(B) 给 定 为 
Pi(B)= Pa{ Xn+1 = jlXn =i}® 
=》 Py(o)Bi(o) 


其 中 最 后 的 等 式 是 由 取 条 件 于 状态 i 时 所 选取 的 动作 得 到 的 . 我 们 假设 对 于 每 一 个 
选取 的 策略 8 所 确定 的 马尔 可 夫 链 {Xn,n = 0,1,…} 是 遍历 的 . 

对 于 一 个 策略 6, 以 ria 记 在 使 用 了 策略 6 时 , 过 程 在 状态 i 并 且 选 取 动 作 a 
时 的 极限 (或 稳 态 ) 概率 . 即 


Tia = im。 Pa{Xn =i,an = a} 


向 其 = (mia) 必须 满足 

(i) 对 于 一 切 i,a, mia > 0. 

(i) Di Drh =1. 

( 道 ) 对 于 一 切记 DD mia = DD; DariaPij(a). (4.33) 
方程 (i) 和 (i 是 显然 的 , 而 方程 ( 轿 ) 与 方程 (4.7) 相似 , 这 是 因为 左边 是 在 状态 j 
的 稳 态 概率 , 而 右边 是 由 取 条 件 于 前 一 步 的 状态 与 选取 的 动作 算得 的 同一 个 概率 . 

于 是 对 于 任意 一 个 策略 8, 存在 一 个 满足 (i)~( 阁 ) 的 向 其 x = (mia), ia 等 于 
使 用 策略 8 时 过 程 在 状态 i 并 且 选 取 动作 a 时 的 稳 态 概率 . 此 外 , 反 过 来 也 是 正确 

@ 我 们 用 符号 Pa 表示 概率 是 在 用 策略 8 的 条 件 下 取 的 . 
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的 . 即 对 于 满足 (i)~( 痢 ) 的 任意 向 量 x = (ria), 存在 策略 6, 如 果 使 用 了 策略 5, 那 
么 过 程 在 状态 i 并且 选取 动作 a 时 的 稳 态 概率 等 于 mia. 为 了 验证 最 后 的 这 个 说 法 ， 
假设 r = (ria) 是 满足 (~(ii) 的 向 量 . 然后 令 策略 8 = {Bi(a)} 为 


Tia 


bi(a) = P{ 策 略 8 选取 a| 状态 为 i} = 喜 


a Tia 
1 

现在 以 Pi 记 在 使 用 策略 8 下 , 过 程 在 状态 i 并 且 选 取 动作 a 时 的 极限 概率 . 我 们 
需要 证 明 Pia。 = ria. 对 此 , 首先 注意 {Pio,i = 1,…, M,a € 4} 是 二 维 马尔 可 夫 链 
{(Xn,an),n > 0} 的 极限 概率 . 因此 , 由 基本 定理 4.1, 它们 是 方程 

(1) Pia > 0， 

他) TY, Pa =1, 

(iii’) Pia = >; Do Pia Pi(a’)Bj(a) 
的 唯一 解 , 其 中 (iii’) 是 因为 

P{Xn+1 = ant1 = alXn =i,an=a} = Pi(a’)B;(a) 

由 于 


ja 
Bi(a) = si 
我 们 看 到 (Po) 是 


有 >0 DY Pa=l, Pea=D) Pa Py(o) 
的 唯一 解 . 因此 , 为 了 证 明 Pi = mia, 我 们 需要 证 明 
Ta20, DD ro=l, rio= DD rp 
这 里 前 面 的 两 个 方程 得 自 方程 (4.33) 的 (i) 和 ( 训 , 而 第 三 个 方程 等 价 于 
Dr = DD mio Pa’) 


它 得 自 方程 (4.33) 的 条 件 (i 
于 是 我 们 已 经 证 明了 向 量 r = (ri) 满足 方程 (4.33) 的 ()~(ii) 当 且 仅 当 存在 
策略 ,在 使 用 策略 8 下 , mia 等 于 过 程 在 状态 ;并且 选取 动作 a 时 的 稳 态 概率 , 可 
实 上 , 这 里 的 策略 有 定义 为 Ba) = ma/ sm 
上 面 的 事实 在 确定 最 佳 策略 时 是 十 分 重要 的 . 例如 ,假设 只 要 在 状态 ; 并 且 选 
取 动作 a 就 跟 得 菜 个 报酬 Ri a). 由 于 R(Xii) 表示 在 时 间 ; 赚 得 的 报酬 在 策略 
了 下 单位 时 间 的 平均 报酬 的 期 望 可 以 表示 为 

0 下 平均 报 本 的 期 望 = lm, Ba [Zoo | 


n 
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现在 , 如 果 以 mia 记 在 状态 i 并 且 选 取 动 作 a 时 的 稳 态 概率 , 这 就 推出 在 时 间 n 的 
报酬 的 期 望 的 极限 等 于 


im E[R(Xn,an)] = > > miaR(i,a) 
由 它 导出 
人 下 平均 报酬 的 期 望 = 5 了》 mio R(i,a). 


因此 , 确定 最 大 化 平均 报酬 的 期 望 的 策略 问题 就 是 求 
最 大 化 >》 > riaR(i,a)， 对 于 一 切 ia 服从 ria > 0 


T=(mia) 了 
Emi 
Dj ro = DriaoPs(a)， 对 于 一 切 j (4.34) 


然而 , 以 上 的 求 最 大 值 问题 是 著名 的 线性 规划 的 一 个 特殊 情形 , 并 且 可 以 用 称 为 单 
纯 形 法 ?的 标准 的 线性 规划 算法 求解 . 如 果 mn* = (zt) 是 上 面 的 最 大 值 , 那么 最 佳 
策略 就 由 8* 给 出 , 其 中 


a- 

注 (i) 可 以 证 明 存在 一 个 mn* 使 方程 (4.34) 取得 最 大 值 , 并 且 具 有 如 下 性 质 : 对 于 
每 个 加 rt 除了 一 个 a 值 以 外 全 是 0, 这 就 导出 最 佳 策略 是 非 随 机 的 . 即 当 在 状态 i 
时 , 指定 的 动作 是 i 的 确定 性 函数 . 

(i 当 在 可 允许 的 策略 类 上 加 约束 时 , 线性 规划 的 表示 形式 也 常常 有 效 . 例如 ， 
假设 存在 一 个 过 程 处 在 某 个 状态 (比如 , 在 状态 1) 的 时 间 的 比例 的 约束 . 特别 地 , 假 
设 我 们 只 容许 考虑 使 过 程 在 状态 1 少 于 100a% 的 时 间 的 策略 . 为 了 确定 约 制 于 这 
个 要 求 的 最 佳 策略 , 我 们 对 线性 规划 问题 加 以 附加 的 约束 


Dme <a 
因为 学 。 mia 表示 过 程 处 在 状态 1 的 时 间 的 比例 . 


4.11 ” 隐 马 尔 可 夫 链 


令 {Xn,n = 1,2,…} 是 一 个 转移 概率 为 PB; 和 初始 状态 概率 为 p;=P{X1 = 让 
(i 之 0) 的 马尔 可 夫 链 . 假设 有 一 个 信号 的 有 限 集 .7 使 马尔 可 夫 链 在 每 次 进入 一 个 
状态 时 发 射 一 个 在 . 中 的 信号 . 此 外 , 假设 当 马 尔 可 夫 链 进入 状态 j 时 , 独立 于 以 


@ 它 称 为 线性 规划 , 因为 目标 函数 站 沁 。R(i, a)ria 和 约束 都 是 ria 的 线性 函数 . 对 于 单纯 形 法 的 
直观 分 析 , 参见 4.5.2 节 . 
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前 马尔 可 夫 链 的 状态 和 信号 , 以 概率 p(s|7) 发 射 信号 s, 并 ,ey (sl7) = 1. 即 如 果 以 
Sn 表示 第 n 个 发 射 的 信号 , 那么 

P{S1= s|X1=j}=7p(slj), P{Sn = s|X1,S1,**, Xn-1, Sn-1, Xn =j}= p(s|j) 
上 述 类 型 的 模型 , 其 中 信号 的 序列 51, 52,… 被 观测 到 , 而 潜在 的 马尔 可 夫 链 的 状态 
序列 X1,X2,… 是 观测 不 到 的 , 这 称 为 一 个 隐 马 尔 可 夫 链 模型 .! 
例 4.42 考虑 一 个 生产 过 程 , 在 每 个 时 段 它 或 者 处 在 一 个 好 的 状态 (状态 1), 或 者 
处 在 一 个 差 的 状态 (状态 2). 如 果 在 一 个 时 段 过 程 处 在 状态 1, 独立 于 过 去 , 在 下 一 
个 时 段 将 以 概率 0.9 处 在 状态 1, 而 将 以 概率 0.1 处 在 状态 2. 一 旦 过 程 处 在 状态 2， 
它 将 永远 处 在 状态 2. 假设 每 个 时 段 生产 一 个 产品 , 当 过 程 处 在 状态 1 时 , 每 个 生产 
的 产品 以 概率 0.99 达到 可 接受 的 质量 , 而 当 过 程 处 在 状态 2 时 , 生产 的 产品 以 概率 
0.96 达到 可 接受 的 质量 . 

如 果 每 个 产品 的 状况 (或 者 可 接受 , 或 者 不 可 接受 ) 相继 地 被 观测 到 , 而 过 程 的 
状态 不 能 观测 到 , 那么 上 面 的 是 一 个 隐 马 尔 可 夫 链 模型 . 信号 是 生产 的 产品 的 状况 ， 
依赖 于 产品 是 可 接受 或 是 不 可 接受 , 分 别 具 有 值 a 或 4. 信号 的 概率 是 

p(ull) = 0.01， p(all) = 0.99, 
p(ul2) = 0.04， p(al2) = 0.96 
而 潜在 的 马尔 可 夫 链 的 转移 概率 是 
Pu1=09=1-Ps, PB2=1 a 


虽然 {5n,n > 1} 不 是 一 个 马尔 可 夫 链 ， 应 该 注意 到 ， 取 条 件 于 当前 的 状态 
Xn, 将 来 的 信号 和 状态 的 序列 Sn, Xnt1, Sn+1,… 独立 于 过 去 的 信号 和 状态 的 序 
列 X1, 51, Xn-l, Sn-1. 

令 5" = (51,…,5n) 为 前 n 个 信号 的 随机 向 基 ， 对 于 一 个 固定 的 信号 序列 
5 sn 令 sk = (s1,…,5k),k < n. 首先 , 我 们 确定 给 定 S" = sn 时 马尔 可 夫 链 
在 时 间 ”所 处 状态 的 条 件 概率 . 为 了 得 到 这 个 概率 , 令 

Fn(j) = P{S" = sn, Xn 一 让 

并 且 注 意 
P{S"=sn Xn=j} _ Fn()) 


i Cr i 


现在 
Fn(j) =P{S"™! = sn-1,Sn = sn, Xn =j} 


= DP{S" =8 Xn i= = = sn} 


= 》 到-iG)P{Xn = Sn = sn|S" = sn_1, Xn-l 一 计 
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= DF i(i)P{Xn = 5n = anlXn-1i = 庆 } 
= DF 1() Psp(snlj) 


=p(sn|j) 》 Fn_1(i) Ps (4.35) 
此 处 在 上 面 用 了 2 
P{Xn = 万 Sn = sn|Xn-1 一 计 
=P{Xn =jXn-l= 计 xP{Sn = snlXn = Xn-i = 
= PijP{Sn = sn|Xn = 从 
= Psp(snlj) 


首先 , 令 
Fm(i)=P{X1=1,51 = 51} = pip(s1li) 
我 们 可 以 利用 方程 (4.35) 递 推 地 确定 函数 F(i), F3(i),…:, Fn(i). 
例 4.43 ”假设 在 例 4.42 中 P{X1 = 1} = 0.8. 给 定 生产 的 前 3 个 产品 的 相继 条 件 
是 a,u,a, 
(i) 当 生产 了 第 3 个 产品 时 , 过 程 在 好 的 状态 的 概率 是 多 少 ? 
(i X4 是 1 的 概率 是 多 少 ? 
( 首 ) 生产 的 下 一 个 产品 是 可 接受 的 概率 是 多 少 ? 
解 用 ss = (a,wa), 我 们 得 到 
Fi(1) = (0.8)(0.99) = 0.792, 
Fi(2) = (0.2)(0.96) = 0.192 
F(1) = 0.01[0.792(0.9) + 0.192(0)] = 0.007 128, 
F>(2) = 0.04[0.792(0.1) + 0.192(1)] = 0.010 848 
Fs(1) = 0.99[(0.007 128)(0.9)] ~ 0.006 351, 
) = 


Fy(2) = 0.96[(0.007 128)(0.1) + 0.010 848] ~ 0.011 098 
所 以 (i) 的 答案 是 mh 
1P{Xs = 1ls3} ~ F006 351 +0.011 098 ~ 0364 


为 了 计算 P{X4 = 1|s3}, 取 条 件 于 X3 得 到 
P{X4 =1|s3} = P{X4 = 1|Xs = 1,ss}P{Xs = 1|s3} 
+P{X4 = 1|X3 = 2,ss}P{Xs = 2|s3} 
=P{X4 = 1|Xas = 1, s3}(0.364) + P{X4 = 1|Xs = 2, 83}(0.636) 
= 0.364P 1 + 0.636Py,1 
= 0.3276 
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为 了 计算 P{54 = olss}, 取 条 件 于 Xs 得 到 
P{S4 = alss}= P{S4 = alX4 = 1,s3}P{X4 = 1|ss} 
+P{S4 = alX4 = 2, s3}P{X4 = 2|s3} 
= P{S4 = alXa = 1}(0.3276) + P{S4 = alX4 = 2}(1 — 0.3276) 
= (0.99)(0.3276) + (0.96)(0.6724) 加 
= 0.9698 
要 计算 P{S”= sn}, 我 们 利用 恒等式 P{S” = sn} = ;Fn(i) 及 递 推 公式 
(4.35). 如 果 马 尔 可 夫 链 有 N 个 状态 , 需要 计算 nN 个 及 (i, 每 一 个 运算 需要 在 N 
项 上 求 和 . 这 可 与 基于 取 条 件 在 马尔 可 夫 链 前 n 个 状态 以 得 到 P{S" = sn} 的 如 下 
的 计算 比较 
P{S" = sn = 》，P{S" = sn|X = 和 Xn =in}P{X1 一 站 7 =in} 


站 in 


= 2 p(s1|i1) p(snlin)pi, Pasia Pisia*** Pin sin 
用 上 述 恒等式 计算 P{S" = sn} 就 要 在 N" 项 上 求 和 , 而 每 一 项 是 2n 个 值 的 乘积 
这 与 上 面 的 方法 无 法 比拟 


用 递 推 地 确定 函数 Fn(i) 计算 P{5" = sn} 是 熟知 的 向 前 方法 . 也 有 向 后 方法 ， 
它 基 于 基 Bk(i), 其 定义 是 
Bk(i) = P{Sk+l = sk+l ,Sn = sn|Xk 一 计 
对 于 Bk(i) 的 递 推 公式 可 以 通过 取 条 件 于 Xk+l 得 到 
Bi(i) = DP{Sk+1 = sk+1 ,Sn = sn|Xk =i Xk = I}P{Xk+1 = j|Xk = 
了 


= 》P{SktHl = skHl ,Sn = sn|Xk+1 =j} Pj 
了 

= DP{Ser = sk+1|Xk+1 = 7} 
+ 


x P{Sk+2 = sk+2,°**, Sn = Sn|Sk+1 = Sk+1s Xk+1 = j}Piy 
= Dj p(srrilj)P{Sk+2 = sk+2,°**, Sn = Sn|Xk+1 = j}Pj 
了 


= plettlj)BktiO)Pv (4.36) 


首先 有 
Bn-l(i)=P{Sn = sn|Xn-1 =i} = DPesp(snlj) 
了 


于 是 我 们 可 以 利用 方程 (4.36) 确定 B。_z(i, 然后 Bn。_3(i),…, B1(i). 再 通过 
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P{S" = sn} = 》 P{Si = 81,.…, Sn = sn|X1 一 计 mi 
i 
a DP{S: =s1|X1 =i}P{S2 = s2,.…, Sn = sn|S1 = s1, X1 = i}ps: 
1 
= Dn(sli)P{s; = 82,°*°, Sn = sn|X1 = i}p: 
二 Drs lBi(i)p: 


得 到 P{S" = sn}. 
另 一 个 得 到 P{S" = sn} 的 方法 是 将 向 前 方法 与 向 后 方法 结合 起 来 . 假设 对 于 
某 个 ,我 们 已 经 计算 了 函数 及 (7) 和 Bi(j). 因为 
P{S" = sn, Xk =j} =P{S* = sk, Xk =} 
x P{Sk+1 = Skt1,°**, Sn = sn|S* = sk, Xk = j} 
=P{S* = sk, Xk =j}P{Sk+1 = sk+1°**, Sn = sn|Xk =j} 
= Fk(j)Bk(I) 
所 以 
P{S" = 8n} = 》 及 (7)BkO) 
了 
利用 上 面 的 恒等式 确定 P{S” = sn} 的 好 处 是 , 我 们 可 以 同时 计算 从 五 起 始 的 向 
前 函数 序列 和 从 Bn-1 起 始 的 向 后 函数 序列 . 这 种 平行 计算 可 以 在 对 于 某 个 已 经 
算得 及 与 Bk 时 停止. 
预测 状态 


假设 前 n 个 观测 信号 是 sn = (s1,.…,sn), 在 给 定 这 些 数据 时 我 们 要 预测 马尔 
可 夫 刍 的 前 n 个 状态 . 最 佳 预测 依赖 于 我 们 想 完成 什么 . 若 我 们 的 目标 是 使 正确 预 
测 的 状态 数 的 期 望 最 大 , 则 对 于 每 一 个 < n 我们 需要 计算 P{Xs 二 jl5" 二 sn 
然后 取 最 大 化 这 个 量 的 值 ; 为 Xk 的 预测 .( 即 对 给 定 信号 序列 , 我 们 取 Xk 的 条 件 
质量 函数 的 峰值 作为 X 的 预测 .) 为 此 , 我 们 必须 首先 计算 条 件 质量 函数 , 其 做 法 
如 下 . 对 于 上 和 mn 
_en_ .1_P{S"=sn Xr=j} _ FO)B() 
PU = en pl] ~ ,RO)B.0) 

于 是 , 给 定 5" = s 时 Xi 的 最 佳 顶 测 是 使 Fi.() Be(j) 最 大 的 值 i 

预测 问题 的 一 个 不 同 的 引申 源 于 我 们 将 状态 序列 看 成 一 个 简单 的 统一 体 . 在 这 
种 情形 , 我 们 的 目标 是 在 给 定 信号 序 列 时 , 选取 条 件 概率 最 大 的 状态 序列 例如 , 在 
信号 处 理 中 ,Xi,…,X。 是 必须 输送 的 真实 信号 ,，S1,…, 5, 将 是 接收 到 的 信号, 所 
以 目标 将 是 在 整体 中 预测 这 个 真实 的 信号: 
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令 Xk = (Xi1,…,Xk) 是 前 个 状态 的 向 量 , 要 求 的 问题 是 寻找 状态 序列 
i vin 使 P{Xn = (各 | S” = sn} 达到 最 大 . 因为 


POXa = (ein)lS" = an) = Dn = Gh i ee} 
全 
它 等 价 于 寻找 状态 序列 如,…,in 使 P{Xn = (ia, ,in)， 5" = sn} 达到 最 大 . 
为 求解 上 面 的 问题, 对 于 <m 令 


WV)= 区 P[{XA-i = (Ii), Xk = = ak} 


为 了 递 推 地 解 Vi(7), 利用 
Vlj) = max, max ,PP{Xk-2= (i ie-2), Xk = Xk = S* = sk} 
Si P{Xk-2= (i ,ik-2), Xk-1=i, S* -1 =sk-1, Xk=j, Sk=sk} 
= max, max ,P{Xk-2 = (il 让 -2) Xk-1 =i,S"! = sk-1} 
XP{X% = ,Sk = 8 对 大 -2 = (lye ik2), Xi =i, St! = sp-1} 
= mgx, max 。 P{Xk-2 = (i ip-2), Xk-1 =i,S*-! = sp-1} 
x P{Xk = j,Sk = sk|Xk-1 = 
= max P{Xk =jSk = sk|Xk-1 三 计 
x , max ,P{Xk-2 = (i ik2), Xk-1 =i,S*-! = sp-1} 
= max Pjp(sklj)Ve-1(i) 
= p(sklj) max PyVe—1(i) (4.37) 


Vi(j)=P{X1=j,51 = si = pip(s1|j) 


开始 , 我 们 现在 用 递 推 恒 等 式 (4.37) 对 每 个 j 确定 V2(j), 然后 对 每 个 了 确定 V3(7)， 
如 此 连续 , 直至 对 每 个 了 确定 Vn.(7). 

为 了 得 到 状态 的 最 大 化 序列 , 我 们 从 相反 的 方向 进行 . 令 加 是 使 你 (7) 最 大 的 
j( 或 者 如 果 有 多 于 一 个 这 样 的 值 中 的 任意 一 个 ). 于 是 j, 是 最 大 化 状态 序列 中 的 最 
后 的 状态 . 同样 , 对 于 上 <n, 令 ik() 是 使 PjVi(i) 最 大 的 i. 那么 
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i P{Xn = 人 ip) S" = sn} 
= max Vn(j) 
= Vn(jn) 
= ,max P{Xn = (eesin-1 in), S" = sn} 
= Plsnljn) max Pr, Vn-1(i) 


= p(snljn) Pi Gn) jn Vai(in-1(jn)) 


于 是 , in-1(jn) 是 最 大 化 状态 序列 中 的 最 后 状态 的 前 一 个 状态 . 继续 这 种 方式 , 最 大 
化 状态 序列 中 的 最 后 状态 的 前 两 个 状态 是 计 -2(in-1(jn)), 如 此 等 等 . 


给 定 了 规定 的 信号 序列 , 上 面 寻找 最 可 能 的 状态 序列 的 方法 称 为 维特 比 (Viterbi) 


算法 . 


i 


“4. 


习 题 


3 个 白 球 和 3 个 黑 球 分 布 在 两 个 坛子 中 , 每 个 含有 3 个 球 . 如 果 第 一 个 坛子 中 有 i 个 白 球 ， 
我 们 就 称 此 系统 处 在 状态 i,i = 0, 1 2, 3. 每 次 我 们 从 每 个 坛子 中 取出 一 个 球 , 并 将 从 第 一 
个 坛子 取出 的 球 放 到 第 二 个 坛子 中 , 从 第 二 个 坛子 取出 的 球 放 到 第 一 个 坛子 中 . 以 X， 记 第 
nn 步 后 系统 的 状态 . 解释 为 什么 {Xn,n > 0} 是 马尔 可 夫 链 , 并 计算 它 的 转移 概率 矩阵 . 


假设 今天 是 否 下 雨 依赖 于 前 三 天 的 天 气 条件 ， 说 明 怎样 用 一 个 马尔 可 夫 链 分 析 这 个 系统 . 


必须 有 多 少 个 状态 ? 


， 在 习题 2 中 , 假设 如 果 过 去 的 三 天 已 经 下 雨 , 则 今天 下 十 的 概率 是 0.8; 如 果 过 去 的 三 天 无 


一 天 下 雨 , 则 今天 下 雨 的 概率 是 0.2; 而 在 其 他 情形 今天 的 天 气 以 概率 0.6 与 昨天 的 天 气相 
同 . 确定 这 个 马尔 可 夫 链 的 转移 概率 矩阵 P. 
考虑 一 个 取 值 0、 1 或 2 的 过 程 {Xn,n > 0}. 假设 
P(Xati = JIX% = Xi = nl Ko = io} 

_ 人 蕊 ，n 是 偶数 

-{ P，n 是 奇数 
其 中 村 2_0 P= 可?_o PY = 1,i 二 0,1,2. {Xn,n > 0} 是 马尔 可 夫 链 吗 ? 如 果 不 是 , 那 
么 说 明 怎样 扩大 状态 空间 , 我 们 可 以 将 它 转变 为 马尔 可 夫 链 . 


个 状态 为 0、 1 或 2 的 马尔 可 夫 链 {Xn,n > 0}, 它 的 转移 概率 矩阵 是 
1 
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如 果 P{Xo =0} = P{Xo = 1 = 二, 求 ELXs]. 


习 题 219 


6. 令 两 个 状态 的 马尔 可 夫 链 的 转移 概率 矩阵 如 例 4.2 中 给 出 的 
p= | td | 
1-P P 
用 数学 归纳 法 证 明 


p= 


7. 在 例 4.4 中 假设 昨天 和 前 天 都 没有 下 雨 . 问 明 天 下 雨 的 概率 是 多 少 ? 
8. 假设 硬币 1 以 概率 0.7 出 现 正面 , 而 硬币 2 以 概率 0.6 出 现 正面 如 果 今 天 抛掷 的 硬币 出 
现 正面 , 那么 明天 我 们 选取 硬币 1 抛掷 , 而 如 果 今 天 抛掷 的 硬币 反面 朝 上 , 那么 明天 我 们 选 
取 硬 币 2 抛掷 . 如 果 开 始 时 等 可 能 地 抛掷 硬币 1 或 硬币 2. 那么 , 在 开始 抛掷 后 的 第 三 天 抛 
挪 的 是 硬币 1 的 概率 是 多 少 ? 假设 星期 一 抛 据 的 硬币 正面 朝 上 . 问 同一 周 的 星期 五 抛掷 的 
硬币 也 是 正面 朝 上 的 概率 是 多 少 ? 
“9. 在 一 个 有 偏 硬币 一 系列 独立 抛掷 中 , 每 次 出 现 正面 的 概率 是 0.6. 问 在 前 10 次 抛掷 中 出 现 
连续 3 次 正面 的 概率 是 多 少 ? 
10. 在 例 4.3 中 , 加 里 现在 处 在 快乐 的 心情 , 问 在 以 后 三 天 中 的 任意 一 天 他 没有 处 在 忧郁 心情 
的 概率 是 多 少 ? 
11. 在 例 4.3 中 , 4 天 前 加 里 处 在 忧郁 的 心情 , 给 定 他 在 一 个 星期 没有 觉得 快乐 , 问 今天 他 处 在 
忧郁 心情 的 概率 是 多 少 ? 
12， 对 于 一 个 具有 转移 概率 已 , 的 马尔 可 夫 链 {Xn,m > 0}, 考虑 给 定 这 个 链 开始 于 时 间 0 处 
在 状态 并 且 在 时 间 n 前 没有 到 过 状态 > 时 Xn = m 的 条 件 概率 . 其 中 是 一 个 不 等 于 i 
或 m 的 特定 状态 . 我 们 想 要 知道 是 否 这 个 条 件 概率 等 于 状态 空间 不 包含 状态 ” 且 转 移 概 
率 为 
Qi i jr 


i 


的 一 个 马尔 可 夫 链 的 n 步 转移 概率 . 或 者 证 明 等 式 


P{Xn =mlXo =i Xk #7,k=1,.,n} = Qim 


或 者 构造 一 个 反例 . 

13. 令 忆 是 一 个 马尔 可 夫 链 的 转移 概率 矩阵 . 论证 如 果 对 于 某 个 正 整数 ", P" 全 是 正 分 量 , 那 
么 对 于 mn > m, P" 全 是 正 分 量 . 

14. 指定 如 下 马尔 可 夫 链 的 类 , 确定 它们 是 否 都 是 暂 态 或 常 返 态 . 
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1 1 
了 业内 
4 4 
二 二 这 
4 234 = 
和 2 3 
= | 二 1 Ps= 
s=|30300 a=|0o0 0 100 
1 1 1 2 
0005353 oo 了 5 了 50 
证 10000 
000353 


15. 证 明 如 果 马 尔 可 夫 链 的 状态 个 数 是 M, 而 状态 了 可 以 由 状态 i 到达, 那么 它 可 以 在 M 步 
以 内 到 达 . 
“16. 证 明 若 状态 i 是 常 返 态 , 且 状 态 i 不 与 状态 j 互通 , 则 Pi; = 0. 它 说 明 一 旦 过 程 进 入 一 个 
常 返 的 状态 类 , 它 绝 不 会 离开 这 个 类 . 因为 这 个 原因 , 一 个 常 返 类 常 指 一 个 闭 的 类 . 
17. 对 于 例 4.18 中 的 随机 游 动 , 用 强大 数 定律 给 出 在 了 时 马尔 可 夫 链 是 暂 态 的 另 一 个 证 
明 . 
提示 ， 注 意 在 时 间 n 的 状态 可 以 写 为 2 Yi, 其 中 Yi 是 独立 的 且 P{Yi = 1} =p = 
1 一 P{Yi = 一 1}. 论证 若 p > 1/2, 则 由 强大 数 定律 , 当 n 一 co 时 , 于 蕊 ; 下 一 oo, 因此 
初始 状态 0 只 能 被 访问 有 限 多 次 , 从 而 必须 是 暂 态 . 类 似 的 推理 在 p < 时 也 成 立 . 
18. 硬币 1 正面 朝 上 的 概率 是 0.6, 而 硬币 2 正面 朝 上 的 概率 是 0.5. 一 枚 硬币 连续 地 抛 所 直至 
反面 朝 上 , 此 时 将 这 个 硬币 搁置 一 旁 , 我 们 开始 抛 据 男 一 术 . 
(a) 用 硬币 1 抛掷 的 比例 是 多 少 ? 
(b) 如 果 我 们 从 抛掷 硬币 1 开始 , 问 第 5 次 抛掷 的 是 硬币 2 的 概率 是 多 少 ? 
19. 对 于 例 4.4, 计算 下 雨天 数 的 比例 . 
电 0 一 个 转移 概率 和 矩阵 已 称 为 双 随 机 的 , 如 果 每 一 列 的 和 是 1, 即 对 于 一 切记 


Dry=1 
如 果 这 样 的 链 是 不 可 约 和 非 周 期 的 ， 并 且 由 M 二 1 个 状态 0,1,……,M 组 成 , 证 明 长 程 比例 
= Es 
“21. 一 个 DNA 核酸 是 4 个 值 中 的 任意 一 个 , 在 一 个 特殊 位 置 的 核酸 突变 的 标准 模型 是 一 个 马 
尔 可 夫 链 模型 , 它 假设 对 于 某 个 0< a < 核酸 从 时 段 到 时 段 以 概率 1 一 3a 不 变 , 而 如 
果 变 化 了 , 则 等 可 能 地 变化 为 其 他 3 种 核酸 中 的 任意 一 个 . 
人 证 明 PR = 了 + 了 (1 一 4a)" 
(b) 这 个 链 在 每 个 状态 的 时 间 的 长 程 比例 是 多 少 ? 
22. 令 Yh 是 独立 地 撞 一 颗 均 匀 的 仙 子 n 次 的 和 . 求 
lim_P{25 是 13 的 代数} 
提示 , 定义 一 个 合适 的 马尔 可 夫 链 , 并 应 用 习题 20 的 结果 . 
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在 好 天 气 的 年 份 中 , 暴风 的 次 数 是 均值 为 1 的 泊 松 随机 变量 ; 在 坏 天 气 的 年 份 中 , 暴风 的 次 
数 是 均值 为 3 的 泊 松 随机 变量 . 假定 任何 一 年 的 天 气 条 件 仅仅 通过 其 前 一 年 的 天 气 条 件 而 
依赖 于 过 去 的 年 份 . 假设 一 个 好 天 气 年 份 后 , 好 天 气 年 份 和 坏 天 气 年 份 等 可 能 地 出 现 ; 而 一 
个 坏 天 气 年 份 后 , 坏 天 气 年 份 出 现 的 可 能 性 是 好 天 气 年 份 的 2 倍 . 假设 去 年 ( 称 为 年 0) 是 
好 天 气 年 份 . 

(a) 求 在 接 下 来 的 两 年 ( 即 年 1 和 年 2) 中 暴风 总 次 数 的 期 望 值 . 

(b) 求 年 3 没有 暴风 的 概率 . 

(c) 求 每 年 暴风 的 长 程 平均 次 数 . 

考察 红 、 白 、 蓝 三 个 坛子 . 红色 的 坛子 含有 1 个 红 球 、4 个 蓝 球 , 白色 的 坛子 含有 3 个 白 
球 、2 个 红 球 、2 个 蓝 球 , 蓝 色 的 坛子 含有 4 个 白 球 、3 个 红 球 、2 个 蓝 球 . 开始 时 随机 地 从 
红色 的 坛子 中 任 取 一 个 球 , 然后 放 回 这 个 坛子 . 在 随后 的 每 一 步 , 从 颜色 与 前 一 个 取得 的 球 
相同 的 坛子 中 随机 取出 一 个 球 , 然后 放 回 这 个 坛子 . 在 长 程 中 , 取得 红 球 的 概率 是 多 少 ? 取 
得 白 球 的 概率 是 多 少 ? 取得 蓝 球 的 概率 是 多 少 ? 

某 人 每 天 早晨 都 长 跑 , 他 等 可 能 地 从 前 门 或 者 从 后 门 离开 房子 . 离开 时 , 他 选 一 双 跑 鞋 (或 
者 赤脚 跑 , 如 果 在 他 离开 的 门 没有 鞋 ). 回来 时 , 他 等 可 能 地 进入 前 门 或 者 后 门 , 并 脱 下 跑鞋 . 
如 果 他 总 计 有 上 双 跑鞋 , 问 他 赤脚 跑 的 时 间 的 比例 是 多 少 ? 

考虑 用 如 下 方法 洗 一 副 n 张 的 纸牌 . 开始 时 纸牌 初始 次 序 任意 , 在 1,2,…,n 中 随机 地 选 
一 个 数 使 得 每 一 个 都 等 可 能 地 被 选 到 . 如 果 选 取 的 是 i, 那么 我 们 将 位 置 i 的 那 张 纸牌 放 到 
这 副 牌 的 最 上 面 , 即位 置 1. 然后 我 们 重复 地 执行 同样 的 操作 . 证明 在 极限 下 , 这 副 牌 被 完 
全 洗 透 , 即 最 终 的 次 序 等 可 能 地 是 n! 个 可 能 次 序 之 一 . 

N 个 总 体 中 的 任 一 个 个 体 在 每 个 时 段 可 能 积极 也 可 能 消极 .如果 一 个 个 体 在 某 时 段 积极 ， 
那么 与 所 有 其 他 个 体 独 立 , 他 在 下 一 个 时 眉 也 积极 的 概率 是 a. 类 似 地 , 如 果 一 个 个 体 在 某 
时 段 消极 , 那么 与 所 有 其 他 个 体 独 立 , 他 在 下 一 个 时 段 也 消 积 的 概率 是 8. 令 Xn 表示 在 时 
段 m 积极 的 个 体 数 . 

(a) 证 明 {Xn,n > 0} 是 马尔 可 夫 链 . 

(b) 求 ELXn|Xo = 让 

(c) 推导 转移 概率 的 表达 式 . 

(d) 求 恰 有 7 个 个 体积 极 的 长 程 时 间 比 例 . 

对 (d) 的 提示 : 首先 考虑 N = 1 的 情形 . 

如 果 一 个 队 赢 得 比赛 , 那么 下 次 比赛 他 们 赢 的 概率 是 0.8; 如 果 一 个 队 输 掉 比赛 , 那么 下 次 
比赛 他 们 赢 的 概率 是 0.3. 他 们 赢得 比赛 有 聚餐 的 概率 是 0.7; 而 输 掉 比 赛 有 聚餐 的 概率 是 
0.2. 求 有 聚餐 的 比赛 次 数 的 比例 . 

一 个 组 织 有 N 个 雇员 , 其 中 N 是 一 个 很 大 的 数 . 每 个 雇员 在 三 个 可 能 的 分 级 工作 中 工作 ， 


并 按 转移 概率 为 
0.7 0.2 0.1 
0.2 0.6 0.2 
0.1 04 0.5 
的 马尔 可 夫 链 (独立 地 ) 改变 其 分 级 . 问 在 每 个 分 级 中 的 雇员 的 百分比 是 多 少 ? 
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30. 在 公路 上 , 每 4 辆 货车 中 有 3 辆 后 面 跟着 一 辆 轿车 ， 而 每 5 辆 轿车 中 只 有 一 辆 后 面 跟着 一 


31. 


“32. 


33, 


34. 


35. 


36. 


37. 


辆 货车 . 行驶 在 公路 上 的 车 辆 中 货车 的 比例 是 多 少 ? 

某 个 小 镇 从 来 没有 连续 两 天 的 晴天 . 每 天 天 气 被 分 类 为 晴 、 多 云 (但 是 干燥 的 )、 雨 天. 若 
一 天 是 晴天 , 则 第 二 天 等 可 能 地 是 多 云 或 雨天 . 若 一 天 是 多 云 或 者 雨天 , 则 第 二 天 有 二 分 之 
一 的 机 会 是 同样 的 天 气 , 而 如 果 天 气 改变 , 那么 它 等 可 能 地 是 其 他 两 种 中 的 一 种 . 晴天 的 长 
程 比例 是 多 少 ? 多 云 的 长 程 比例 是 多 少 ? 

在 一 天 中 两 个 开关 或 者 开 或 者 关 . 在 第 n 天 , 每 个 开关 独立 地 处 于 开 的 概率 是 


[I+ 第 n-1 天 是 开 的 开关 数 ]/4. 


例如 , 如 果 在 第 n 一 1 天 两 个 开关 都 是 开 的 , 那么 在 第 n 天 , 每 个 开关 独立 地 处 于 开 的 概率 
是 3/4. 问 两 个 开关 都 是 开 的 天 数 的 比例 是 多 少 ? 两 个 开关 都 是 关 的 天 数 的 比例 是 多 少 ? 
某 教授 不 断 考 她 的 学 生 . 她 进行 三 类 考试 , 并 将 她 班 的 成 绩 评分 为 优秀 或 者 差 . 以 pi 记 这 
个 班 在 类 型 i 的 考试 中 得 到 优秀 的 概率 , 并 假设 pl = 0.3, pz = 0.6 和 ps = 0.9. 如 果 这 个 
班 的 一 次 考试 得 到 优秀 , 那么 下 一 次 考试 等 可 能 地 是 这 3 种 类 型 之 一 , 而 如 果 这 个 班 的 一 
次 考试 得 到 差 , 那么 下 一 次 考试 总 是 类 型 1 的 考试 . 问 考试 类 型 ii = 1, 2,3) 的 比例 的 是 
多 少 ? 

一 个 跳 重 在 一 个 三 角形 的 顶点 上 按 如 下 方式 移动 . 当 它 在 顶点 i 时 , 以 概率 Pi 移 向 顺 时 针 
方向 的 相 邻 顶点, 而 以 概率 qi = 1 一 ps 移 向 逆 时 针 方向 的 相 邻 顶点 ,站 = 1,2, 3. 
(a) 求 跳 重 在 每 一 个 顶点 的 时 间 的 比例 . 
(b) 在 跳蚤 做 了 一 次 道 时 针 方 向 的 移动 后 紧 跟 连续 5 次 顺 时 针 方 向 的 移动 有 多 频繁 ? 
考察 具有 状态 0,1,2,3,4 的 一 个 马尔 可 夫 链 ， 假 设 Po = 1, 并 且 假设 ， 当 这 个 链 在 状态 
ili > 0) 时 , 下 一 个 状态 等 可 能 地 是 0,1,… ,i 一 1 中 的 任意 一 个 . 求 这 个 马尔 可 夫 链 的 极 
限 概率 . 

-个 过 程 每 天 按 一 个 两 状态 的 马尔 可 夫 链 改变 其 状态 . 若 过 程 一 天 在 状态 i, 则 其 后 的 一 天 
以 概率 Pi,; 处 在 状态 j, 其 中 


Po=0.4, Pi1=06, Plo=0.2, Pi=0.8 


每 天 送出 一 个 信息 . 如 果 在 那天 马尔 可 夫 链 的 状态 是 i, 那么 送出 的 信息 是 好 信息 的 概率 是 
pi, 是 坏 信息 的 概率 是 qi = 1 一 pi, i = 0,1. 
(a) 若 星 期 一 过 程 在 状态 0, 那么 星期 二 送出 一 个 好 信息 的 概率 是 多 少 ? 
(b) 着 星期 一 过 程 在 状态 0, 那么 星期 五 送出 一 个 好 信息 的 概率 是 多 少 ? 
(c) 在 长 程 中 信息 是 好 的 比例 是 多 少 ? 
(d) 如 果 在 第 n 天 送出 一 个 好 信息 , 则 令 Y% = 1, 而 在 其 他 情形 令 Yn 等 于 2. 问 {Yn,n > 
1} 是 马尔 可 夫 链 吗 ? 如 果 是 , 给 出 它 的 转移 概率 矩阵 . 如果 不是 , 简明 地 解释 为 什么 不 
是 . 
证 明 具有 转移 概率 Pi,; 的 马尔 可 夫 链 的 平稳 概率 , 对 于 某 个 特定 的 正 整数 k, 此 平稳 概率 
也 是 由 由 
Qi = Ps 
给 定 的 转移 概率 为 Qi; 的 马尔 可 夫 链 的 平稳 概率 . 
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卡 帕 每 天 玩 一 次 或 两 次 游戏 . 她 在 相继 的 日 子 中 玩 游戏 的 次 数 是 一 个 以 
Pi=0.2, Pl2=0.8, Pa1=0.4, PB2=0.6 


为 转移 概率 的 马尔 可 夫 链 . 假设 每 次 卡 帕 启 的 概率 为 p, 而 且 她 在 星期 一 玩 两 次 游戏 

(a) 她 在 星期 二 玩 的 游戏 都 赢 的 概率 是 多 少 ? 

(b) 她 在 星期 三 平均 玩 多 少 次 游戏 ? i 

(0) 卡 帕 赢 得 所 有 游戏 的 天 数 的 长 程 比例 是 多 少 ? 

考虑 在 例 4.18 中 的 一 维 对 称 随机 游 动 , 已 证 明了 该 例 是 常 返 的 . 

(a) 论证 对 一 切 有 mi = mo- 

(b) 证 明 ,mi 1. 

(0) 求证 马尔 可 夫 链 是 零 常 返 的 , 而 且 因此 ri = 0. 

粒子 在 圆周 的 12 个 点 上 移动 . 每 次 等 可 能 地 沿 顺 时 针 或 逆 时 针 方向 移动 一 步 . 求 粒子 回 
到 出 发 点 时 的 平均 步 数 . 

考虑 一 个 以 非 负 整 数 为 状态 的 马尔 可 夫 链 , 假设 其 转移 概率 满足 PR; = 0,J < i 假定 
Xo = 0, 且 设 马尔 可 夫 链 迟早 进入 状态 7 的 概率 为 e;( 注 意 因 为 Xo = 0, 所 以 eo = 1). 论 
证 对 3>0 有 


yt 
6 = DePs 
r: 
又 若 忆 ck = 下 全 12.3, 对 于 ii 10, 求 er 


令 4 是 一 个 状态 的 集合 , 而 令 4* 是 其 余 状态 的 集合 . 
(a) 忆 iea Zieae miP5 表示 什么 ? 
(b) 可 iene 志 iea miPy 表示 什么 ? 


(c) 解释 恒等式 
DY np=) DnPy 


i€EAjeA® i€EA jEA 
每 天 有 个 可 能 的 元 素 之 一 被 需求 ， 第; 个 元 素 被 需求 的 概率 为 P,i > 1, 学 ?P= 1 这 
些 元 素 总 是 排 成 有 序 的 列表 , 并 规定 如 下， 所 选 的 元 素 被 移 至 列表 的 最 上 面 , 而 其 他 所 有 元 
素 的 相对 位 置 都 保持 不 变 ， 定 义 在 任意 时 间 的 状态 为 该 时 刻 的 列表 排序, 并 注意 有 ml 个 可 
能 的 状态 
(a) 论证 上 面 的 是 马尔 可 夫 链 
(b) 对 于 任意 状态 证 ，…, in( 这 是 12,…,n 的 一 个 排列), 以 zt, ,in) 记 其 极限 概率 . 
为 了 状态 是 如，…, 训 ,最 后 的 需求 必须 是 i, 非 的 最 后 需求 是 iz, 非 i 且 非 i 的 
最 后 需求 是 ja, 如 此 等 等 . 因此 , 直观 表示 为 
Po Bsa 
Mt 


当 n = 3 时 验证 上 式 确实 是 极限 概率 . 


。 假 设 一 个 总 体 在 其 任意 一 代 由 定 值 m 个 基因 组 成 . 每 个 基因 是 两 个 可 能 的 基因 型 之 一 . 如 


果 任 意 一 代 (在 它 的 m 个 中 ) 恰 有 i 个 基因 是 1 型 , 那么 下 一 代 以 概率 
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有 j 个 1 型 (和 m 一 j 个 2 型 ) 基因 . 以 Xn 记 第 n 代 的 1 型 基因 个 数 , 并 假定 Xo = i 

(a) 求 E[IXn]. 

(b) 最 终 所 有 的 基因 都 是 1 型 的 概率 是 多 少 ? 

考察 一 个 不 可 约 的 具有 状态 0, 1,… ,NN 的 有 限 马尔 可 夫 链 . 

(a) 从 状态 开始 , 过 程 最 终 访问 状态 j 的 概率 是 什么 ? 给 以 解释 . 

(b) 令 ri = P{ 在 访问 状态 0 之 前 访问 状态 N| 开始 在 讨 . 计算 zi 满足 的 一 组 线性 方程 ， 
i=0,1,.…,N. 

(c) 如 果 对 于 i 二 1,…,N 一 1 有 并 jPi = 证明 zi = i/N 是 (b) 中 方程 的 一 个 解 . 

某 人 有 r 把 雨伞 用 在 往返 于 家 和 办 公 室 之 间 ， 如 果 在 一 天 的 开始 (结束 ) 他 在 家 (在 办 公 

室 ) 而 且 正 在 下 雨 , 那么 , 当 有 雨伞 时 , 他 取 一 把 雨伞 去 办 公 室 ( 回 家 ), 如 果 不 下 雨 , 他 绝 不 

拿 雨 伴 . 假定 独立 于 过 去 , 在 一 天 的 开始 (结束 ) 下 雨 的 概率 是 p. 

(i) 定义 一 个 有 + 1 个 状态 的 马尔 可 夫 链 以 帮助 我 们 确定 这 个 人 被 淋 湿 的 次 数 的 比例 . 
( 注 ， 如 果 正 在 下 雨 , 而 所 有 雨伞 都 在 其 他 地 方 , 则 他 被 淋 湿 .) 


(ii) 证 明 极限 概率 为 
r +‘ 和 者 f 
T= 1 ei 其 中 gq=1-p 
7 十 全 Pr 
( 道 ) 这 个 人 淋 湿 的 次 数 的 比例 是 多 少 ? 


(iv) 当 r = 3 时 , p 取 什 么 值 时 使 他 被 淋 湿 的 次 数 的 比例 最 大 ? 
以 {Xn,n > 0} 记 具 有 极限 概率 x; 的 一 个 遍历 的 马尔 可 夫 链 . 以 Y= (Xn-1, Xn) 定义 
过 程 {Yn,n > 1}. 即 Y% 追踪 原来 链 的 最 后 的 两 个 状态 .{Yn,n > 1} 是 否 是 一 个 马尔 可 
夫 链 ? 如 果 是 , 确定 它 的 转移 概率 , 并 求 
lim, P{Y" = (i,7)} 
考察 一 个 处 于 稳定 状态 的 马尔 可 夫 链 . 如 果 
Km-k-1 #0, Xm-k = Xm-kt+tl=***= Xm-1=0, Xm#0 
就 说 在 时 刻 m 以 上 个 长 度 连 续 的 零 结束 . 证 明 这 个 事件 的 概率 是 ro(Poo)*-:(1 一 Po,0)?， 
其 中 mo 是 在 状态 0 的 极限 概率 . 
以 PW 和 PG) 记 具有 同样 的 状态 空间 的 遍历 马尔 可 夫 链 的 转移 概率 矩阵 , 以 x! 和 7? 
记 这 两 个 链 的 平稳 (极限 ) 概率 向 量 . 考察 一 个 如 下 定义 的 过 程 : 
(D Xo = 1， 然 后 抛掷 一 枚 硬币 , 若 正 面 朝 上 , 则 余下 的 状态 X1,.… 都 得 自转 移 概率 矩 
阵 已 (0)， 而 若是 反面 ， 则 得 自 已 2)，{Xn,m > 0} 是 否 构成 一 个 马尔 可 夫 链 ? 如 果 
卫 = 了 (硬币 正面 朝 上 ), 则 limn 一 = P{Xn = 计 是 多 少 ? 
(i Xo = 1. 每 次 抛掷 硬币 , 若 正面 朝 上 , 则 下 一 个 状态 按 PW 被 选取 , 而 若是 反面 朝 上 ， 
则 按 PQ 被 选取 . 在 此 情形 , 相继 的 状态 是 否 构成 一 个 马尔 可 夫 链 ? 如 果 是 , 确定 其 
转移 概率 . 用 一 个 反例 说 明 其 极限 概率 与 (i) 中 的 不 同 . 
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在 习题 8 中 , 若 今天 抛掷 出 现 正 面 , 问 直至 模型 “ 反 、 反 、 正 、 反 、 正 、 反 、 反 ?” 出 现 所 需 的 
附加 抛掷 次 数 的 期 望 是 多 少 ? 

在 例 4.3 中 , 加 里 今天 心情 快乐 . 求 直至 他 连续 3 天 是 忧郁 的 天 数 的 期 望 . 

一 个 出 租 汽车 司机 服务 于 城市 的 两 个 地 段 . 从 A 地 段 上 车 的 乘客 的 目的 地 以 概率 0.6 在 A 
地 段 , 或 以 概率 0.4 在 B 地 段 . 从 B 地 段 上 车 的 乘客 的 目的 地 以 概率 0.3 在 A 地 段 ,或 以 
概率 0.7 在 B 地 段 . 这 个 司机 一 次 全 在 A 地 段 的 平均 获 利 是 6, 一 次 全 在 B 地 段 的 平均 获 
利 是 8, 而 一 次 涉及 两 个 地 段 的 平均 获 利 是 12. 求 这 个 出 租 汽车 司机 每 次 的 平均 获 利 . 
在 例 4.27 中 , 如 果 对 于 三 分 之 一 的 顾客 有 和 = 1/4, 而 对 于 三 分 之 二 的 顾客 有 入 = 1/2, 求 
保险 公司 从 每 个 参 保 人 收 到 的 平均 保费 . 

考察 埃 伦 费 斯 特 坛子 模型 , 其 中 M 个 分 子 分 布 于 两 个 坛子 中 , 在 每 个 时 间 点 , 随机 地 取出 
一 个 分 子 , 然后 将 它 移出 它 的 坛子 , 并 放 到 另 一 个 坛子 中 . 以 X 记 在 第 n 次 转移 后 在 坛子 
1 中 的 分 子 个 数 , 并 令 jn = E[Xn]. 证 明 

(a) pn+1 = 1+(1—2/M)pumn. 


(b) 用 (a) 证 明 
m= 半 +( 和 %) (spal- 芭 ) 


考察 一 个 总 体 , 其 中 的 个 体 有 两 个 基因 , 它们 可 以 为 型 4 或 a. 假设 在 外 观 上 型 4 是 显 
性 的 , 且 型 a 是 隐 性 的 ( 即 个 体 只 在 他 的 时 是 aa 时 , 才 有 隐 性 的 外 观 特征 )， 假 设 这 
个 总 体 已 经 达到 稳定 , 而 个 体 有 基因 对 AA, Aa, aa 的 百分数 分 别 为 p,q,7. 个 体 称 为 显 性 
的 或 隐 性 的 , 依赖 于 它 所 显示 的 外 观 . 以 Su 记 两 个 显 性 的 父母 的 子 代 是 隐 性 的 概率 , 而 以 
Sio 记 一 个 显 性 一 个 隐 性 的 父母 的 子 代 是 隐 性 的 概率 . 计算 Su 和 Sio, 证 明 Su = 5 名 . 
(Sio 和 Su 在 遗传 学 的 文献 中 是 众所周知 的 斯 条 德 比 .) 
假设 财 徒 在 每 局 赌博 中 , 或 者 以 概率 p 赢得 1, 或 者 以 概率 1 一 p 输 了 1. 峙 徒 不 断 地 下 注 
直到 他 赢得 n 或 输 了 m. 问 周 徒 以 赢家 离开 的 概率 是 多 少 ? 
一 个 质点 在 位 于 圆周 上 的 n 十 1 个 顶点 间 以 如 下 方式 移动 : 每 次 以 概率 p 按 顺 时 针 方向 移 
动 一 步 , 或 者 以 概率 g = 1 一 p 按 逆 时 针 方向 移动 一 步 . 从 一 个 特殊 的 状态 0 出 发, 令 了 是 
它 首次 回 到 状态 0 的 时 间 . 求 在 以 前 一 切 状态 都 已 访问 毅 的 概率 . 
提示 ， 取 条 件 于 初始 转移 , 然后 利用 周 徒 破产 问题 的 结论 . 
在 4.5.1 节 的 赌 徒 破产 问题 中 , 假设 赌 徒 现在 的 财富 是 i, 并 假设 赌 徒 的 财富 最 终 将 达到 
N( 在 达到 0 以 前 ). 给 定 这 个 信息 , 证 明 他 在 下 一 次 赌博 中 启 的 概率 是 

Pll — (q/p)'*"] 1 

I=(g/pj 车 P#3 


让 四 
pr 车 p= 


提示 : 我 们 要 求 的 概率 是 
P{Xn+l =i+1Xn =i, lim Xm = N} 
P{Xnt1 =i+1, lim Xm = NIXn =} 
Pt lm RN 
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对 于 4.5.1 节 的 财 徒 破产 模型 , 已 知 赌 徒 开始 时 有 财富 i(i = 0,1…, NN), 以 Mi 记 直到 赔 
徒 破产 或 者 达到 财富 N 所 必须 赌博 的 平均 次 数 , 证 明 M: 满足 


Mo= My=0; Mi=1+pMirit+qMii, i=1,:...,N—1 
解 以 上 方程 组 得 到 
i(N -i 着 P= 
Mi= 
i __N 1-(q/p) 1 
1-P 9-Pi-t/p™ P+3 


如 下 的 以 1, 2, 3, 4 为 状态 的 马尔 可 夫 链 转 移 概率 矩阵 
04 03 02 0.1 
_| 02 02 02 04 
| o25 025 05 0 
02 01 04 03 
若 Xo=1 


(a) 求 到 达 状态 4 之 前 到 达 状 态 3 的 概率 . 

(b) 求 直 至 到 达 状 态 3 或 状态 4 的 平均 转移 次 数 . 

假设 在 赌 徒 破产 问题 中 赢得 一 局 的 概率 依赖 于 赌 徒 当前 的 财富 . 特别 地 , 假设 as 是 当 赌 徒 
的 财富 为 i 时 , 他 赢得 一 局 的 概率 . 给 定 赌 徒 的 初始 财富 是 i, 以 P(i) 记 赌 徒 的 财富 在 达到 
0 以 前 达到 NN 的 概率 . 

(a) 推导 一 个 联系 P(i) 与 P(i 一 1) 和 P(Gi 十 1) 的 公式 . 

(b) 用 与 财 徒 破产 问题 同样 的 方法 , 求解 (a) 中 关于 P(i) 的 方程 . 

(c) 假设 开始 有 i 个 球 在 坛子 1 中 , 而 有 N 一 i 个 球 在 坛子 2 中 , 并 假设 每 次 在 N 个 球 中 
随机 地 选取 一 个 , 并 放 到 另 一 个 坛子 中 . 求 第 一 个 坛子 比 第 二 个 坛子 先 变 空 的 概率 . 
重新 考察 习题 57 中 的 质点 .质点 回 到 出 发 位 置 的 步 数 的 期 望 是 多 少 ? 在 质点 回 到 出 发 位 

置 前 所 有 其 他 的 位 置 都 已 访问 的 概率 是 多 少 ? 
状态 为 1, 2, 3, 4 的 马尔 可 夫 链 的 转移 概率 矩阵 为 以 下 指定 的 忆 
04 02 01 03 
0.1 0.5 0.2 0.2 
0.3 0.4 02 0.1 
0 0 0 1 
对 i=1,2,3, 求 fa 和 si3. 
考虑 一 个 A < 1 的 分 支 过 程 . 证 明 : 如 果 Xo = 1, 那么 总 体 中 最 终 存在 的 个 体 数 的 期 望 为 
1/(1 一 辣 . 如 果 Xo = n, 那么 该 期 望 是 什么 ? 
在 Xo = 1 和 /> 1 的 分 支 过 程 中 , 证 明 ro 是 满足 方程 (4.20) 的 最 小 正 数 . 
提示 : 令 r 是 r = 站 和 om PP 的 任意 一 个 解 。 用 数学 归纳 法 证 明 对 于 一 切 n 有 "> 
P{Xn = 0}, 并 且 令 n 一 oo. 再 用 归纳 法 论证 
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P{Xn =0} = SPX =0})iP; 


i=0 
对 于 分 支 过 程 计 算 ro, 当 


一 个 坛子 总 含有 N 个 球 , 有 些 是 白 球 ,有 些 是 黑 球 .每 次 抛掷 一 枚 以 概率 p(0 < p < 1) 
出 现 正面 的 硬币 . 若 出 现 正面 , 则 从 坛子 中 随机 地 取 一 个 球 并 用 一 个 白 球 来 替换 ; 若 出 现 反 
面 , 则 从 坛子 中 随机 地 取 一 个 球 并 用 一 个 黑 球 来 蔡 换 ， 以 X" 记 在 第 n 次 后 坛子 中 的 白 球 
个 数 . 
(a) {Xn,n > 0} 是 否 为 马尔 可 夫 链 ? 若是 , 解释 为 什么 . 
(b) 它 的 类 是 什么 ? 周期 是 什么 ? 是 暂 态 还 是 常 返 态 ? 
(c) 计算 转移 概率 Pij. 
(d) 令 N = 2. 求 在 每 个 状态 的 时 间 比 例 . 
(e) 基于 你 对 (d) 的 回答 和 你 的 直觉, 猜测 在 一 般 情 形 的 极限 概率 的 答案 . 
(f) 通过 证 明 满足 方程 (4.7) 或 用 例 4.35 的 结果 , 证 明 你 在 (e) 中 的 猜测 . 
(g) 若 p = 1, 当初 始 有 i 个 白 球 和 N 一 i 个 黑 球 时 , 直到 坛子 中 只 有 白 球 的 平均 时 间 是 多 
? 
(a) 通过 证 明 逆向 马尔 可 夫 链 的 极限 概率 和 正 向 概率 满足 方程 
7 一 > TiQij 
来 证 明 这 两 个 概率 是 相同 的 . 
(b) 对 于 (a) 的 结果 给 以 直观 解释 . 
AM 个 球 最 初 分 布 于 m 个 坛子 中 . 每 次 从 任意 一 个 坛子 中 随机 地 选取 一 个 球 , 再 将 它 随 机 
地 放 进 其 他 的 m 一 1 个 坛子 中 的 一 个 . 考察 一 个 马尔 可 夫 链 , 在 任意 时 间 它 的 状态 是 一 个 
向 量 (ni,… ,nm), 其 中 ns 记 在 第 i 个 坛子 中 的 球 的 个 数 . 猜测 这 个 马尔 可 夫 链 的 极限 概 
率 , 然后 验证 你 的 猜测 , 同时 证 明 这 个 马尔 可 夫 链 是 时 间 可 逆 的 . 
总 共 m 个 白 球 和 m 个 黑 球 分 布 在 两 个 坛子 中 , 每 个 坛子 中 有 m 个 球 . 每 次 从 每 一 个 坛子 
中 随机 地 取 一 个 球 , 并 将 这 两 个 取出 的 球 交换 . 以 Xn 记 经 过 n 次 交换 后 坛子 1 中 的 黑 球 
个 数 . 
(a) 给 出 马尔 可 夫 链 {Xn,n > 0} 的 转移 概率 
(b) 不 用 任何 计算 , 你 认为 这 个 链 的 极限 概率 是 什么 ? 
(c) 求 长 程 概率 , 并 且 证 明 平稳 链 是 时 间 可 逆 的 . 
从 定理 4.2 推出 , 对 于 一 个 时 间 可 北 的 马尔 可 夫 链 , 对 于 一 切 i,j, 上 有 


PiPyr Pes = Pir PejPis, 


它 推出 如 果 状 态 空间 有 限 而 对 于 一 切 i,j 有 Pi; > 0, 那么 上 面 的 也 是 对 于 时 间 可 逆 性 的 充 


228 


第 4 章 马尔 可 夫 链 


72. 


73. 
74. 


75. 


76. 


77. 


分 条 件 . ( 即 在 这 种 情形 , 我 们 只 需 对 从 只 有 两 个 中 间 状 态 的 i 到 i 的 路 径 检验 方程 (4.26).) 
证 明 这 一 点 . 
提示 : 固定 i 并 证 明 ri = cPij/ Ps 满足 方程 

iPr TPR 


其 中 选取 c 使 得 并 mi = 1. 
对 于 一 个 时 间 可 道 的 马尔 可 夫 链 , 论证 它 从 i 到 j 到 大 这 个 转移 出 现 的 比率 必须 等 于 它 从 
大 到 了 到 i 的 转移 出 现 的 比率 . 

证 明 习题 31 的 马尔 可 夫 链 是 时 间 可 逆 的 . 

一 组 n 个 处 理 器 排列 在 一 个 有 序列 表 上 . 当 有 任务 时 , 在 线 的 第 一 个 处 理 器 试图 完成 它 , 如 
果 不 成 功 , 则 在 线 的 下 一 个 进行 尝试 ; 如 果 也 不 成 功 , 则 在 线 的 再 下 一 个 进行 尝试 , 如 此 等 
等 . 当 任务 成 功 地 被 处 理 或 者 在 所 有 的 处 理 都 不 成 功 以 后 , 这 个 任务 就 离开 这 个 系统 .这 时 
我 们 允许 将 处 理 器 重新 排序 , 并 且 出 现 一 个 新 的 任务 .假设 我 们 使 用 移 近 一 位 的 重 排 规则 ， 
即 通过 与 它 前 一 个 交换 位 置 , 将 成 功 的 处 理 器 向 首 个 位 置 移 近 一 位 ， 如 果 所 有 的 处 理 器 都 
不 成 功 (或 在 第 一 个 位 置 的 处 理 器 是 成 功 的 ), 那么 排序 保持 不 变 ， 假 设 每 次 处 理 器 i 尝试 
一 个 任务 , 独立 于 其 他 情形 , 它 成 功 的 概率 是 pi. 

(a) 定义 一 个 合适 的 马尔 可 夫 链 以 分 析 这 个 模型 . 

(b) 证 明 这 个 马尔 可 夫 链 是 时 间 可 逆 的 . 

(c) 求 长 程 概率 . 

一 个 马尔 可 夫 链 称 为 一 个 树 过 程 , 如 果 

人 当 Pi > 0 时 有 Pi > 0. 

(i 对 于 每 对 状态 (i,j),i 关 j, 存在 唯一 的 一 列 不 同 状态 i = ioia，…,in-bin = 了 使 


Pa >0, k=0,1,.,n—1 


就 是 说 , 一 个 马尔 可 夫 链 是 一 个 树 过 程 , 如 果 对 于 每 一 对 不 同 状态 i,j, 过 程 有 从 i 到 7 的 
唯一 的 道路 , 无 需 重新 进入 一 个 状态 (从 而 这 条 道路 是 从 j 到 i 的 唯一 的 路 径 的 逆向 路 径 ). 
论证 一 个 遍历 的 树 过 程 是 时 间 可 逆 的 
在 一 个 国际 象棋 的 棋盘 上 , 计算 从 棋盘 的 四 个 角 出 发 的 一 个 骑士 ( 马 ) 回 到 它 的 初始 位 置 的 
步 数 的 期 望 , 如 果 我 们 假定 每 次 等 可 能 地 取 任意 一 个 合理 的 移动 (在 棋盘 上 没有 其 他 棋子 ). 
提示 : 利用 例 4.36. 
在 一 个 马尔 可 夫 决 策 问题 中 , 不 同 于 单位 时 间 的 平均 回报 的 期 望 的 另 一 个 常用 的 准则 是 折 
扣 回 报 的 期 望 ， 在 这 个 准则 中 , 我 们 选取 一 个 数 a,0 < a < 1, 并 且 试图 选取 一 个 策略 使 
EE[ 沁 亿 o "R(Xi, ai)] 取得 最 大 ( 即 在 时 间 n 的 报酬 以 等 级 a" 打折 ). 假设 初始 状态 按 概 
率 bi 选取 . 即 
P{Xo=i}=b, i=1,.,n 

对 于 给 定 的 一 个 策略 B, 以 We 记过 程 在 状态 7 并 且 选 取 动作 a 时 的 折扣 时 间 的 期 望 

即 


可 
Ya = Eg 区 orion 
n=0 
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其 中 对 于 任意 事件 4, 示 性 变量 I4 定义 为 


(a) 证 明 


或 者 , 换 句 话说 并 。Wi 是 在 8 下 在 状态 j 的 折扣 时 间 的 期 望 ， 
(b) 证 明 1 
Dw = Dye=b+aD DyePs(o) 
Re < ra 
提示 : 对 于 第 二 个 方程, 用 恒等式 
ED 1 
对 上 式 取 期 望 得 到 
Ellxan=i)] = DD Ell(x, en =o Ps(o) 
(e) 令 {ya} 是 满足 
DH, Dye=b ta Dwr) (4.38) 
J 2 Ca 


的 一 组 数 . 论证 We 可 以 解释 为 , 当初 始 状态 按 概率 b; 选取 , 而 使 用 由 


给 出 的 策略 8 时 , 过 程 在 状态 j 并 且 选 取 动作 a 的 折扣 时 间 的 期 望 
提示 : 在 使 用 策略 8 时 推导 一 组 平均 折扣 时 间 的 方程 , 并 且 证 明 它们 等 价 于 方程 (4.38). 
(d) 论证 对 于 折扣 回报 期 望 准则 的 一 个 最 佳 策略 , 可 以 首先 求解 线性 规划 


在 条 伯 。 于 开 和 过 ， 
二 Via 一 三 十 a > > via Pij(a), 
Wa 之 0， 对 于 一 切 ja 

下 最 大 化 了) 了》 yiaR(j,a) 


然后 定义 策略 6 为 
B= 


aVia 


其 中 好 。 是 线性 规划 的 解 . 
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78. 对 于 习题 5 中 的 马尔 可 夫 链 , 假设 p(slj) 是 当 潜 在 的 马尔 可 夫 链 的 状态 是 j(j = 0,1,2) 
时 发 射 信号 s 的 概率 . 
(a) 发 射 的 信号 是 s 的 比例 是 多 少 ? 
(b) 发 射 的 信号 是 s 的 次 数 中 潜在 状态 是 0 的 比例 是 多 少 ? 

79. 在 例 4.43 中 , 前 4 个 生产 的 产品 都 是 可 接受 的 概率 是 多 少 ? 
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5.1 引 言 


对 于 现实 世界 中 的 现象 , 在 建立 一 个 数学 模型 时 总 需要 做 某 些 简化 的 假定 , 使 
其 在 数学 上 容易 处 理 . 另 一 方面 , 我 们 又 不 能 作 太 多 的 简化 假定 , 因为 这 样 我 们 从 数 
学 模型 得 到 的 结论 将 不 能 应 用 到 现实 世界 的 情形 . 因此 , 我 们 必须 做 足够 的 简化 假 
定 以 使 我 们 能 做 数学 处 理 , 但 不 是 过 多 假定 致使 数学 模型 不 再 像 现实 世界 的 现象. 
常 做 的 一 个 简化 假设 是 假定 某 些 随机 变 基 是 服从 指数 分 布 的 . 这 样 做 的 原因 是 指数 
分 布 不 仅 处 理 起 来 相对 容易 , 而 且 它 常常 是 实际 分 布 的 一 个 良好 的 近似 . 

容易 用 于 分 析 的 指数 分 布 的 性 质 是 它 不 随时 间 而 改变 ， 即 如 果 一 个 部 件 的 寿 
命 服从 指数 分 布 , 那么 已 经 用 了 10 个 (或 者 任意 ) 小 时 的 一 个 部 件 在 它 失效 前 的 那 
段 时 间 里 与 新 的 部 件 一 样 好 . 这 将 在 5.2 节 中 形式 地 给 出 定义 , 在 那里 将 证 明 指数 
分 布 是 具有 这 个 性 质 的 唯一 分 布 . 

在 5.3 节 中 我 们 将 研究 计数 过 程 , 并 且 强 调 一 类 称 为 泊 松 过 程 的 计数 过 程 . 在 
有 关 这 个 过 程 的 其 他 事实 中 , 我 们 将 揭示 它 与 指数 分 布 的 紧密 联系 . 


5.2 指数 分 布 


5.2.1 定义 
一 个 连续 随机 变量 X 称 为 具有 参数 为 (入 > 0) 的 指数 分 布 , 如 果 它 的 概率 密 
度 函 数 为 
)e-x，z>0 
/四 = { 0， z<0 
或 者 , 等 价 地 说 , 它 的 cdf (累积 分 布 函数 ) 为 


rT>0 


6 
za=| om 人 9 


指数 分 布 的 均值 E[X] 为 
E[X] = | zjf(z)dz = [三 和 ze-Xzdz 
一 oo 0 


用 分 部 积分 (u = z,du = Me-Ydr) 导出 
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EX]= -ze + 。 oar = 
指数 分 布 的 矩 母 函数 p(t) 为 
TE i 
4 的 =Beod=| 。 Ye Ndr = oi t< 入 (5.1) 
现在 可 以 通过 对 方程 (5.1) 求 微 商 来 得 到 X i 例如 
d? 2 
BX = 和 | = -Gy 二 证 | = 
随 之 有 
Var(X) =EIX9- (EIX]*= 训 - 喜 = 总 


例 5.1 (指数 随机 变量 和 平均 折扣 回报 ) 假设 我 们 自始至终 连续 地 以 随机 地 变化 的 
速率 接受 报酬 . 以 R(z) 记 在 时 刻 z 正在 接受 报酬 的 随机 速率 . 对 于 一 个 称 为 折扣 
率 的 值 c > 0, 基 


R= 3 eo*R(z)dz 
0 
表示 总 折扣 报酬 . (在 某 些 应 用 中 , a 称 为 连续 复合 利率 , 而 R 是 无 穷 报 酬 流 的 折 现 
值 ) 而 
EIR]=E Ih | -=| er“=E[R(z)ldz 
是 平均 总 折扣 报酬 , 我 们 将 证 明 它 也 等 于 在 以 a 为 速率 的 指数 分 布 的 随机 时 间 里 
所 得 的 平均 总 报酬 . 


令 了 是 一 个 以 a 为 速率 的 指数 随机 变量, 它 独立 于 所 有 的 随机 变量 R(z). 我 
们 要 论证 


oo 
| e-°*E[R(z)]Jdz = s||, Redz| 
为 了 证 明 它 , 对 于 每 个 > > 0, 定义 随机 变量 T(z) 为 


ijs= 1 车 zs < 人 TT 
0， 若 z> 了 


并 注意 
T oo 
| R(z)dz =| R(z)I(z)dz 
0 0 

于 是 
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E 下 Rtaz] =E 此 R(z) )1a] 


= 三 ai E[R(z)I(z)]dz 
o 


=| PIC)IEI(olaz 由 独立 性 
及 E[R(z)JP{T > zjdz 

0 
= erezE[R(z]ldz 

0 


所 以 ,平均 总 折扣 报酬 等 于 在 速率 等 于 这 个 折扣 因子 时 的 指数 分 布 的 ee 
得 的 平均 总 (无 折扣 的 ) 报酬 . 


5.2.2 ”指数 分 布 的 性 质 
一 个 随机 变量 X 称 为 无 记忆 的 , 如 果 对 于 一 切 s,t>0 有 
P{X>s+tlX>t}=P{X>s} (5.2) 


如 果 我 们 将 X 想象 为 某 个 仪器 的 寿命 , 那么 方程 (5.2) 说 明了 , 给 定 存活 了 t 小 时 
的 仪器 , 至 少 存活 s 二 上 小 时 的 条 件 概率 等 于 它 至 少 存活 s 小 时 的 初始 的 概率 . 换 句 
话说 , 如 果 仪器 在 时 间 t 是 存活 的 , 那么 它 余 留 的 存活 时 间 的 分 布 等 于 原来 寿命 的 
分 布 . 即 这 个 仪器 并 不 记 住 它 已 经 使 用 过 的 时 间 t. 
方程 (5.2) 中 的 条 件 等 价 于 
P{X>s+t,X>t 
DS =P{X > s} 
或 等 价 地 
P{X>s+t}=P{X > s}P{X >t} (5.3) 
由 于 当 X 是 指数 分 布 时 方程 (5.3) 成 立 (因为 exe+9 = eX*e-Xt), 由 此 推出 指数 
分 布 的 随机 变量 是 无 记忆 的 . 
例 5.2 ”假设 在 银行 的 时 间 以 均值 为 10 分 钟 指数 地 分 布 , 即 和 = 1/10. 问 一 个 顾 
客 在 此 银行 用 时 超过 15 分 钟 的 概率 是 多 少 ? 假定 一 个 顾客 10 分 钟 后 仍 在 银行 中 ， 
她 在 银行 用 时 超过 15 分 钟 的 概率 是 多 少 ? 
解 ”如果 X 表示 顾客 在 这 个 银行 的 时 间 , 那么 第 一 个 概率 是 
P{X > 15} =e-!* =e-3/? ~ 0.223 
第 二 个 问题 需要 求 一 个 已 经 在 银行 用 时 10 分 钟 的 顾客 至 少 再 用 时 5 分 钟 的 概率 . 
然而 , 由 于 指数 分 布 没有 “记忆 ”这 个 顾客 已 经 在 银行 10 分 钟 了 , 因此 这 必须 等 于 
一 个 进入 的 顾客 在 银行 中 至 少 5 分 钟 的 概率 . 即 要 求 的 概率 是 
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P{X>5}=e 一 e-1/2 = 0.607 [ 


例 5.3 ”考察 一 个 由 两 个 办 事 员 经 营 的 邮局 . 假设 当 史 密斯 先生 进入 邮局 的 时 候 ， 
他 发 现 琼斯 先生 正 接受 一 个 办 事 员 的 服务 , 而 布朗 先生 正 接受 另 一 个 办 事 员 的 服务 . 
再 假设 史密斯 先生 被 告知 , 只 要 琼斯 先生 或 布朗 先生 中 的 一 个 离开 , 他 的 服务 就 可 
以 立刻 开始 . 如 果 一 个 办 事 员 用 在 一 个 顾客 上 的 时 间 是 以 均值 为 1/A 指数 地 分 布 
的 , 那么 在 这 3 个 顾客 中 , 史密斯 先生 是 最 后 一 个 离开 邮局 的 概率 是 多 少 ? 
解 ”答案 用 下 面 的 推理 得 到 : 考虑 史密斯 先生 首先 发 现 一 个 办 事 员 有 空 的 时 间 . 在 
此 时 琼斯 先生 或 布朗 先生 中 的 一 个 刚 离开 , 而 另 一 个 仍 在 接受 服务 ， 然而, 由 指数 
分 布 缺乏 记忆 的 性 质 推出 , 另 一 个 人 (琼斯 先生 或 布朗 先生 ) 再 花费 在 邮局 内 的 时 
间 仍 旧 是 以 均值 为 1/ 指数 地 分 布 的 . 即 这 正 与 他 在 这 时 刚 开始 接受 服务 相同 . 因 
此 , 由 对 称 性 , 他 在 史密斯 先生 前 结束 的 概率 必须 等 于 1/2. 国 
例 5.4 在 一 次 汽车 事故 中 损失 的 金额 数 基 是 均值 为 1000 的 指数 随机 变 基 , 其 中 
保险 公司 只 赔付 超出 (可 扣除 的 金额 ) 400 的 金额 . 求 保险 公司 赔付 事故 金额 的 期 望 
值 和 标准 差 . 
解 ”如 果 X 是 由 一 次 事故 导致 的 损失 的 金额 数 基 , 那么 保险 公司 赔付 的 金额 是 
(X -400)+( 其 中 a+ 定义 为 : 如 果 a > 0 则 等 于 a, 如 果 a < 0 则 等 于 0. 虽然 从 第 
一 个 原则 我 们 可 以 肯定 地 确定 (X - 400)+ 的 期 望 值 和 方差 , 但 是 取 条 件 于 X 是 否 
超过 400 将 更 为 简便 . 所 以 , 令 

es { 1， 若 X > 400 

0， 若 XX< 400 


令 Y = (X 一 400)+ 是 赔付 的 金额 . 由 指数 分 布 缺乏 记忆 的 性 质 推出 , 如 果 损害 的 金 
额 超过 400, 那么 它 超出 400 的 金额 也 是 均值 为 1000 的 指数 随机 变 基 . 所 以 
EIYIT= 1] = 1000, ElYII=0]=0 
Var(YIT= 1) = 10002， ”Var(YIT=0) =0 
可 以 将 它们 简写 成 
E[YI1] = 1031, Var(Y|7) = 1067 
因为 了 是 一 个 以 概率 e-0 等 于 1 的 伯 努 利 随机 变量 , 所 以 
E[Y] = E[E[Y|N])] = 103E(1] = 103e-04 ~ 670.32 
而 由 条 件 方差 公式 
Var(Y) = E[Var(Y|1)] + Var(E[Y|N]) = 105e-04 + 105e-04(1 — e—0.4) 
其 中 最 后 的 等 式 用 了 参数 为 p 的 伯 努 利 随机 变量 的 方差 为 p(1 一 p). 随 之 有 
Var(Y) ~ 944.09 加 
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指数 分 布 是 无 记忆 的 , 而 且 它 是 唯一 具有 这 种 性 质 的 分 布 . 为 了 看 出 这 一 点 , 假 
设 X 是 无 记忆 的 , 并 令 F(z) = P{X > z}. 那么 由 方程 (5.3) 推出 
F(s+t) = F(s)F(t) 
即 F(z) 满足 函数 方程 
g(s+t) = g(s)g(t) 
然而 , 这 个 函数 方程 的 右 连续 的 解 只 有 
g(z) = 
而 由 于 一 个 分 布 函数 总 是 右 连续 的 , 所 以 必须 有 
F(z)=e-Y 或 F(z)=P{X<z}=1-e* 
这 就 证 明了 X 是 指数 分 布 的 . 
例 5.5 为 了 使 某 种 商品 能 够 满足 下 个 月 的 销 基 需求 , 商店 必须 决定 这 种 商品 的 定 
购 基 , 这 里 假设 需求 有 速率 为 和 的 指数 分 布 . 如 果 商 店 以 每 磅 c 英镑 的 价格 买 进 这 
种 商品 , 而 以 每 磅 s(s > c) 英镑 的 价格 卖 出 , 应 该 定购 多 少 商品 才能 使 商店 的 期 望 
利润 最 大 ? 假定 月 底 剩 下 的 存货 毫 无 价值 , 而 且 商 店 不 能 满足 所 有 的 需求 也 不 会 受 
处 罚 ， 
解 ” 令 等 于 需求 其 . 如 果 商 品 定购 基 是 t, 那么 利润 己 为 
P=smin(X,t)— 


Xr@ 


记 


min(X,t) =X— (Xt)+t 
对 是 否 成 立 X > 上 取 条 件 并 且 利用 指数 分 布 的 无 记忆 性 可 得 
E[(X —t)+]= E[((X —t)+|X > tP( IO SR t) 
= Sl —t)+|X > tle- 


i 
入 
其 中 最 后 一 个 等 式 用 指数 随机 变 基 的 无 记忆 性 推断 , 在 X 超过 上 的 条 件 下 , 超出 基 


是 速率 为 和 的 指数 随机 变 基 . 因此 ， 


Elmin(X,t)] = 


et 
XN 


@ 证 明 如 下 : 车 g(s 十 ) = g(s)g(t), 则 
-人 为 -多 
而 重复 这 样 做 得 到 g(m/n) = g™(1/n). 此 外 
sds (3+ Fp) gn (3) 从 而 s(2 )= (gD)#. 


因此 g(m/n) = (9(1))m/”, 由 于 9 是 右 连续 的 , 这 就 推出 g(z) = (g(1))*, 由 于 g(1) = (g(1/2))? 
之 0, 所 以 g(z) =e- 六 ,其 中 入 = 一 In(g(1)). 
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于 是 


E[P|]= 二 一 一 Xe —ct 


微分 后 可 得 当 se 一 c= 二 0, 即 t= x In(s/c) 时 利润 最 大 . 现在 假设 所 有 没 卖 出 的 
存货 能 以 每 磅 r(r < min(s,c)) 英镑 的 价格 退回 , 而 且 不 能 满足 的 需求 量 处 以 每 磅 p 
英镑 的 罚款 . ea 用 前 面 得 到 的 E[P] 的 表达 式 , 可 得 


ElP]|=~— xe™ —ct+rE[(t— X)+]—pE[(X —t)+] 
利用 
min(X,t)=t—(t—X)+ 

可 得 

El — X)+] =t— Elmin(X,t)] =t— 3+ Xe* 
因此 ， 

ElP]== F Se Mctt+rt— I+ em 一 te 
微分 后 可 得 最 佳 定 购 基 是 


. s+p—7 
(到 2 
值得 注意 的 是 , 最 佳 定购 量 关 于 s,p 和 r 递增 而 关于 和 和 <。 递减 人 六 
直观 吗 ?) 
无 记忆 性 质 可 由 指数 分 布 的 失败 率 函数 (也 称 风险 率 函 数 ) 得 到 进 一 pm 
考察 一 个 具有 分 布 函 数 已 和 密度 / 的 连续 的 正 随机 变量 .失败 (或 风险 ) 站 
函数 rt) 定义 为 


7 的 一 工 人 (5.4) 


为 了 解释 r(t), 假设 某 个 具有 寿命 X 的 部 件 已 经 存活 了 + 小时, 并 且 我 们 要 求 它 在 
一 个 附加 时 间 dt 内 不 存活 的 概率 . 即 考虑 P{X e (t,t 十 dt)|X > 甘 . 现在 
P{X €l(t,t+dt),X>t} 


P{X€l(t,t+dt)lX >t}= 


P{X >t} 
Pe tt ed} ,feet 
= pxS ~I-FO™ Ot 


即 r(t) 表示 一 个 年 龄 为 上 年 的 部 件 损坏 的 条 件 概率 密度 . 
现在 假设 寿命 分 布 是 指数 的 . 那么 , 由 无 记忆 性 推出 , 对 于 一 个 年 龄 为 + 年 的 部 
件 , 其 剩余 寿命 的 分 布 与 新 的 部 件 一 样 . 因此 r(b) 必须 是 常数 . 这 是 由 于 
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四 
二 
于 是 , 指数 分 布 的 失败 率 函 数 是 常数 . 参数 和 常常 指 分 布 的 如 亩 (注意 速率 是 均值 的 
倒数 , 而 且 反 过 来 也 对 ). 
失败 率 函 数 r(t) 唯一 地 确定 了 分 布 F. 为 了 证 明 它 ， 我 们 法 意 到 由 方程 (5.4) 


有 


d 
F(t) 
i 
"(0) = TE 
两 边 求 积分 , 推出 
In(1— F(t) = -| 7(t)dt +k 
0 
因此 


1— F(t) =ekexp 人 rd 
取 t=0 得 k=0, 从 而 
F(t)=1— ep 人 | rod 


上 面 的 等 式 也 可 以 用 来 证 明 只 有 指数 随机 变量 是 无 记忆 的 , 因为 若 X 是 无 记 
忆 的 , 则 它 的 失败 率 函 数 必须 是 常数 . 但 是 若 r(ti) = c, 则 由 上 面 的 方程 
1— F(t) =ere 
显示 出 随机 变量 是 指数 的 . 
例 5.6 令 Xi，……,Xn 是 分 别 以 Nt,……》n 为 速率 的 独立 指数 随机 变量 , 其 中 Ni 元 
Xi 关 小 令 了 独立 于 这 些 随机 变量 , 并 且 假 设 


已 =1， 其 中 已 =P{T= 升 . 
j=1 


随机 变量 Xr 称 为 起 指数 随机 变量 .为 了 弄 清楚 这 样 的 一 个 随机 变量 是 怎样 产生 
的 , 我 们 想象 在 一 个 镀 中 装 有 n 种 不 同类 型 的 电池 , 类 型 j 的 电池 维持 一 个 速率 为 
Xi 的 指数 分 布 的 时 间 , 7 = 1,…,n. 再 假设 每 种 类 型 j(j = 1,…n) 的 电池 在 钠 中 
的 比例 是 已. 如 果 等 可 能 地 从 经 中 任意 取 一 个 电池 即 随机 地 选用 一 个 电池 , 那么 选 
取 到 的 电池 的 寿命 就 有 上 面 特定 的 超 指数 分 布 . 

为 了 得 到 X= Xr 的 分 布 函数 已 , 取 条 件 于 工 . 这 推出 


1—- F(t)=P{X >}= 和 Ptx >tz=i 计 PtT= 计 = 和 Pen 
i=1 


记 1 


对 上 式 求 微 商 推出 X 的 密度 函数 f 为 
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JG) = Spe* 


i=1 


因此 , 一 个 超 指 数 随机 变 基 的 失败 率 函 数 是 


注意 到 
P{X>1T=j)P{T=j} _ _ Pe-™t 


P{T=jlX>t}= P(XS> Fe Plex 


我 们 看 到 失败 率 函 数 7(t) 可 以 写成 


r(t) = yi NP{T=jIX > 
j=1 


如 果 对 于 一 切 i> 1 有 入 < 入 i, 那么 
P{T=1|X>t}= 二 
Pie Nt + Dima Ple™ Mt 
aa PP 

P+ ,Pet 
类 似 地 , 当 i 关 1 时, P{T =ilX > 二 一 0, 于 是 证 明了 

dm r(t)= min 入 

即 作 为 一 个 随机 选取 的 电池 的 寿命 , 它 的 失败 率 趋 近 于 具有 最 小 失败 率 的 指数 型 失 
败 率 , 这 是 很 直观 的 , 因为 电池 维持 越久 , 它 就 越 可 能 是 最 小 失败 率 的 电池 类 型 ， 国 


5.2.3 ”指数 分 布 的 进一步 性 质 

令 X1,…,Xn 是 具有 均值 1/A 的 独立 同 分 布 的 指数 随机 变量 . 由 例 2.39 的 结 
果 得 到 Xi +…'+ Xn 具有 参数 为 n 和 和 的 伽 马 分 布 . 我 们 用 数学 归纳 法 给 出 这 个 
结果 的 第 二 种 验证 . 因为 在 n = 1 时 无 需 证 明 , 我 们 先 假定 Xi +… 十 Xn-1 具有 密 
度 


一 1， 当 t 一 co 时 


(At)n-2 
(n—2) 


frit-tXn -ab = Xe 
因此 

foretsestie = fre fre (ds 
= [ Wee Dds 


o 2)! 
_ -Mt(Ab” 1 
a 人- 
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这 就 证 明了 结果 

另 一 个 有 用 的 计算 是 确定 一 个 指数 随机 变量 小 于 另 一 个 的 概率 . 即 假设 Xi 和 
X2 是 分 别 具 有 均值 1/ 和 1 和 1/Xz 的 独立 指数 随机 变量 . 问 P{X1 < X2} 是 多 少 ? 
这 个 概率 容易 通过 对 Xi 取 条 件 算得 : 


oo 
P{X < X2} -=| P{X1 < Xoz|Xi = z} Me Nrds 
可 
=| P{z < X2} Me Mdr 
-|[ -sar Nerd 
0 


全 和 ie-(Na+Xz)zdz 
o 
a 入 
+》 
假设 Xi, X2,…, Xn 是 独立 的 指数 随机 变量 ，X; 具有 速率 li = 1,…,n. 结 
果 显 现 为 , 取 Xi 的 最 小 值 是 速率 为 jv; 的 和 的 指数 随机 变量 . 其 证 明 如 下 : 


P{min(X1,.…, Xn) > z} = P{ 对 于 每 个 i(i = 1,:…,n), Xi > zx} 
=][P{Xi > z} (由 独立 性 ) 


i=l 


n 
二 IIe… 
记 1 


= oo 全 虽 + (5.0) 


例 5.7( 分 析 分 配 问题 的 贪 禁 算 法 ) 将 个 工作 分 配给 nn 个 人 , 每 人 分 配 一 个 工作 . 
对 于 给 定 的 吕 个 值 C(i,j)(i,j = 1,…,n), 当 工作 了 分 配给 第 i 个 人 时 将 付出 一 个 
价格 C(i,j). 经 典 的 分 配 问题 是 确定 这 样 的 一 组 分 配 , 使 付出 的 n 个 价格 的 和 最 小 . 

与 试图 确定 最 佳 分 配 相 比较 , 我 们 更 愿意 考察 求解 这 个 问题 的 两 个 直观 算法 . 
第 一 个 算法 如 下 : 分 配给 第 1 个 人 最 小 价格 的 工作 . 即 给 第 1 个 人 分 配 工作 访 , 其 
中 C(1, 广 ) = minj(C(1,7)). 现在 不 考虑 这 个 工作 , 分 配给 第 2 个 人 最 小 价格 的 工 
作 . 即 给 第 2 个 人 分 配 工作 jz, 其 中 C(2,j2) = minjizxh(C(2,7))， 继续 这 样 的 程序 
直到 所 有 n 个 人 都 分 配 了 工作 为 止 . 因为 这 个 程序 总 是 对 所 考虑 的 人 选取 最 佳 的 
工作 , 我 们 称 它 为 贪 梦 算 法 A. 

第 二 个 算法 称 为 贪 禁 算 法 B, 它 是 第 一 个 贪 焚 算 法 的 较为 “全 局 ”的 版 本 . 它 考 
虑 所 有 的 n? 个 价格 值 , 并 选取 使 C(i,j) 最 小 的 一 对 (ia, 力 ). 然后 给 第 ia 个 人 分 配 
工作 放 . 然后 排除 涉及 第 谎 个 人 或 工作 坟 的 所 有 价格 值 (故而 有 (n 一 1)? 个 值 保 


(5.5) 
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留 ), 并 且 继续 同样 的 方式 进行 . 即 每 次 在 未 分 配 的 人 和 工作 中 间 选 取 价 格 最 小 的 人 
与 工作 . 

假定 C(i,j) 构成 一 组 "2 个 独立 的 指数 随机 变量 , 每 个 有 速率 1. 问 两 个 算法 
中 的 哪 一 个 产生 较 小 的 期 望 总 价格 ? 
解 ”假设 用 第 一 个 贪 焚 算 法 A. 以 Ci 记 与 第 i 个 人 相 结 合 的 价格 , i = 1,…,n. 现 
在 Ci 是 n 个 有 速率 1 的 独立 指数 随机 变量 的 最 小 值 . 所 以 , 由 方程 (5.6), 它 是 具 
有 速率 n 的 指数 随机 变量 . 类 似 地 , C2 是 n 一 1 个 有 速率 1 的 独立 指数 随机 变量 的 
最 小 值 . 所 以 , 由 方程 (5.6), 它 是 具有 速率 n 一 1 的 指数 随机 变量 . 同 理 Ci 是 具有 
速率 n 一 i+1 的 指数 随机 变量 , i = 1,…,n. 于 是 贪 焚 算 法 A 的 期 望 总 价格 是 


Ea[ 总 价格 ] = E[C 十 … 十 Cn] = 


i=1 
现在 分 析 贪 焚 算 法 B. 令 Ci 是 这 个 算法 分 配 的 第 i 个 人 与 工作 的 价格 ， 因为 

Ci 是 所 有 n? 个 C(i,j) 值 的 最 小 值 , 由 方程 (5.6) 推出 它 是 具有 速率 n? 的 指数 随 
机 变量 . 现在 由 指数 随机 变 基 的 无 记忆 性 推出 , 其 他 C(i,j) 超出 C1 的 基 是 具有 速 
率 1 的 指数 随机 变量 . 于 是 C2 等 于 Cl 加 上 (n 一 1)? 个 速率 为 1 的 独立 指数 随机 
变量 的 最 小 值 . 类 似 地 , Cs 等 于 Cs 加 上 (n 一 2)? 个 速率 为 1 的 独立 指数 随机 变 二 
的 最 小 值 , 如 此 等 等 . 所 以 , 我 们 看 到 

E[C1] = 1/n2?， 

E[C2] = E[C1] + 1/(n 一 1D?， 

E[Cs] = E[C2] + 1/(n 一 2)2， 


EIC;] = EIC;-1] + 1/(n -i+1)”, 


ECn] = EICn-1] +1 
所 以 
PIC] = 1/n?, 
E[C2] = 1/n2 + 1/(n 一 1)2， 
E[C3] = 1/n2+1/(m 一 1D)2+1/(n 一 2)2， 


E[C»] =1/n2+1/(n—1)?+1/(n—2)+.…+1 


所 有 的 E[Ci] 加 起 来 导出 
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Bs 喘 价 机 一 徊 + 亿 = 让 + 人 = 让 +…+1=》 

于 是 两 个 贪 焚 算 法 的 期 望 价格 是 相同 的 . nm 

令 XX，,……,Xn 是 分 别 具 有 速率 和,…, 和 \n 的 独立 指数 随机 变量 . 推广 方程 (5.5) 
便 得 到 一 个 有 用 的 结论 , 即 Xi 以 概率 Xi/ ;1 和 ; 是 它们 中 最 小 的 一 个 . 其 证 明 如 
下 ， pe 
j=1 和 
其 中 最 后 的 等 式 用 了 方程 (5.5) 以 及 minixi X; 是 速率 为 沁 ;y; Ni 的 指数 随机 变量 
这 个 事实 . 

另 一 个 重要 的 事实 是 mini Xi 与 Xi 的 大 小 次 序 是 独立 的 . 为 了 型 清楚 为 什么 
这 是 对 的 , 在 给 定 最 小 值 大 于 t 的 条 件 下 , 考察 Xi < Xi … < Xi, 的 条 件 概率 . 因 
为 mini Xi > t 的 意思 是 所 有 的 Xi 都 大 于 t, 由 指数 随机 变量 的 无 记忆 性 推出 , 它 
们 超出 t 的 剩余 寿命 仍然 是 具有 原来 速率 的 独立 指数 随机 变 基 . 随 之 有 

P{Xi < ……< Xin | min Xi >t}=P{Xi, 一 上 < < Xi, —tlmin Xi > 寺 

=P{X, <…… < Xi,} 
就 是 说 , 我 们 已 证 明了 下 述 命题 . 
命题 5.1 车 Xi，…,Xn 是 独立 指数 随机 变量 , 各 有 速率 和 1，…， 和 n, 则 minX; 是 
速率 为 了 ?1 和 i 的 指数 变量 , 进而 min Xi 与 变量 XX1，…,Xn 的 次 序 独立 . 
例 5.8 ”假设 你 到 达 邮 局 时 , 邮局 仅 有 的 两 个 办 事 员 都 在 忙 , 而 且 没有 人 在 排队 
等 待 ， 只 要 哪个 办 事 员 有 空 , 你 都 进入 服务 ， 如 果 办 事 员 i 的 服务 时 间 是 速率 为 
和 i(i = 1,2) 的 指数 分 布 , 求 E[T], 其 中 了 是 你 待 在 邮局 的 时 间 . 
解 ” 以 Ri 记 顾客 在 办 事 员 i 那里 的 剩余 服务 时 间 , i = 1,2, 并 且 注 意 , 由 指数 随机 
变 基 的 无 记忆 性 , Ri 和 R2 是 独立 的 随机 变量 , 具有 各 自 的 速率 和 和 2. 取 条 件 
于 Ri 和 Ro 中 较 小 的 一 个 推出 
E[T] = E[T|Ri < Ra]P{R < R2} + EIT|R2 < RiJP{R2 < Ri} 


记 1 


P{Xi = min Xj} = P{X < min Xj} = 
水 Ji 


= E[TIR1 < Ra] 
现在 , 以 S 记 你 的 服务 时 间 
EIrlRi < Ra] = ER + SIR < Ra] 
= E[Ri|R < Ro] + EISIR1 < 已] 
=E[RIR < Ro] + 让 


tl 
+ A 


1 2 
— +ErIR < Rj — 
pr i 
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最 后 的 等 式 用 了 取 条 件 于 R! < R2, 随机 变 基 RR 是 R 和 Ro 中 最 小 的 , 从 而 它 是 
速率 为 Xi + Xa 的 指数 随机 变 基 . 同时 取 条 件 于 Ri < Rz, 你 是 由 办 事 员 1 服务 的 . 
因为 我 们 可 以 用 类 似 的 方式 推出 


EI[TIR» < Ri] = 


于 
Al 十 X2 2 
我 们 得 到 结果 
和 十 和 

另 一 个 得 到 EI7] 的 途经 是 将 写成 一 个 和 , 取 期 望 , 并 在 需要 时 取 条 件 . 这 个 
方法 导出 


EIT] = Elmin(Ri, R2) + 5] = Elmin(Ri, R2)] + E[S] = 
为 了 计算 E[S], 我 们 取 条 件 于 Ri 和 R2 中 小 的 那个 
Bls] = BISIR! < Ra A + ElSIR < RJT = 
例 5.9 在 身体 中 有 个 细胞 , 其 中 细胞 1,…,k 是 目标 细胞 . 每 个 细胞 有 一 个 权 
重 , wi 是 细胞 i 的 权重 , i = 1,…,n. 每 次 按 一 个 随机 的 次 序 毁 灭 一 个 细胞 , 设 当前 
存活 的 细胞 的 集合 是 5, 那么 独立 于 已 经 被 毁灭 而 不 在 $ 中 的 细胞 的 次 序 , 下 一 次 
被 杀 的 细胞 是 i 的 概率 为 wi/ 并 jcs wj,i e 3. 换 句 话说 , 给 定 存活 的 细胞 下 次 被 杀 
的 概率 是 其 权重 除 以 仍旧 存活 的 细胞 的 权重 的 和 . 以 4 记 当 所 有 的 细胞 1,… ,都 
被 杀 时 仍旧 存活 的 细胞 总 数 . 求 E[4]. 
解 ” 虽 然 直 接 用 组 合 推理 求解 这 个 问题 相当 地 困难 , 但 是 可 以 通过 将 细胞 被 杀 的 
次 序 与 一 个 独立 指数 随机 变 基 排 序 联系 起 来 ， 从 而 得 到 一 个 精巧 的 解 ， 为 此 , 令 
X1,…, Xn 是 独立 的 指数 随机 变 基 , Xi 具有 速率 wi,i = 1,…,n. 注意 Xi 将 以 概 
率 wi/ 沁 ; ui 为 其 中 的 最 小 者 ， 此 外 , 给 定 X; 最 小 时 ，Xr 是 第 2 小 者 的 概率 为 
wr/ 沁 jzyi wi 再 者 , 在 给 定 Xi 和 X 分 别 是 其 中 第 1 与 第 2 最 小 时 , Xs(s i,7) 
是 第 3 小 者 的 概率 是 ws/ 学 ;yi wj, 依次 类 推 . 因此 , 如 果 我 们 令 是 X1,…，X， 
中 第 7 小 者 的 下 标 ( 即 Xn < Xi,。 < … < Xr), 那么 细胞 被 杀 的 次 序 与 五 ，…… 六 
同 分 布 . 所 以 , 我 们 假设 细胞 被 杀 的 次 序 由 XX1,…,X 的 次 序 确定 (等 价 地 , 我 们 可 
以 假设 一 切 细胞 最 终 将 被 杀 , 而 第 i 个 细胞 在 时 间 Xi 被 杀 , i = 1,…,n). 
如 果 当 所 有 的 细胞 1,…,k 都 被 杀 时 细胞 ; 仍旧 存活 , 我 们 令 A; = 1, 而 在 其 
他 情形 令 它 为 0, 那么 R 
A 济 


j=k+l 
为 如 果 X; 大 于 X1,…, Xi 的 所 有 值 , 当 所 有 的 细胞 1,… ,kk 都 被 杀 时 细胞 j 仍 
日 存活 , 我 们 看 到 , 对 于 了 > 大 


EIT] = 


1 
E[S 
证 
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Bi]=P{4 = 了 
=P{X;> max Xi} 
=| P{X;> ax XilX 一 Zjaoje “dr 
由 


二 
一 | P{Xi < z, 对 于 一 切 i=1,…,k}wjie-" 炉 dz 
0 


和 
三 | I -ee™)we-wrqz 


i=1 


1 大 
=| Ha-w /ay 
0 i=1 
其 中 最 后 的 等 式 得 自 符 换 y =e- 于 是 我 们 得 到 结果 


n 1 n k 
B= SIH-w | DI- 
1 


=k+1"0 i= j=k+1i=1 
于 


1 大 


例 5.10 ”假设 顾客 有 序 地 排队 接受 一 个 服务 员 的 服务 . 一 旦 一 次 服务 完毕 , 在 队 
列 中 的 下 一 个 人 就 进入 服务 系统 . 然而 , 每 个 等 待 的 顾客 只 等 待 一 个 速率 为 9 的 指 
数 分 布 时 间 . 如 果 在 这 个 时 间 前 还 没有 开始 他 的 服务 , 他 就 立刻 离开 系统 . 各 个 顾 
客 的 这 些 指数 时 间 是 独立 的 . 此 外 , 服务 时 间 是 速率 为 的 独立 指数 随机 变 基 . 假 
设 现在 某 人 正在 接受 服务 , 考察 队列 中 第 ”个 顾客 . 

(a) 求 这 个 顾客 最 终 接 受 服务 的 概率 P. 

(b) 求 在 给 定 她 最 终 接受 服务 的 条 件 下 , 她 在 队列 中 等 待 的 总 时 间 的 条 件 期 望 
Wn. 
解 ”考察 由 正在 接受 服务 的 人 的 剩余 服务 时 间 , 以 及 队列 中 前 n 个 人 的 速率 为 0 
的 附加 指数 离开 时 间 组 成 的 n 十 1 个 随机 变 基 . 

(a) 给 定 这 m + 1 个 独立 指数 随机 变 其 的 最 小 者 是 队列 中 第 n 个 人 的 离开 时 间 
时 , 这 个 人 接受 服务 的 条 件 概率 是 0. 另 一 方面 , 给 定 这 个 人 的 离开 时 间 并 不 是 最 小 
时 , 这 个 人 接受 服务 的 条 件 概率 正好 像 开始 时 他 处 在 位 置 n 一 1 一 样 . 因为 给 定 的 
一 个 离开 时 间 是 n + 1 个 独立 指数 随机 变 基 的 最 小 者 的 概率 是 9/(n6 + 4), 所 以 我 
们 得 到 


_ (nDotp 
Rt 
在 上 式 中 用 nn 一 1 代替 nn 给 出 
bE md Asm Le -20+Ap ， 


noth (n—1)0+k ng+h 
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继续 这 种 方式 导出 结果 
8 
n+tp' no+tp 

(b) 为 了 确定 Wa 的 一 个 表达 式 , 我 们 利用 独立 指数 随机 变 基 的 最 小 值 独 立 于 
它们 的 大 小 的 排序 这 个 事实 , 并 且 该 最 小 值 的 速率 等 于 它们 速率 的 和 . 因为 直到 第 
nn 个 人 进入 服务 系统 的 时 间 是 这 n + 1 个 随机 变量 的 最 小 值 加 上 以 后 的 附加 时 间 ， 
由 指数 随机 变 基 的 无 记忆 性 , 我 们 得 到 


已 


是 
Wn = ey rs 


对 于 相继 的 n 个 最 小 值 重复 上 面 的 推理 可 得 解 为 
1 
Wn = 辫 i 
5.2.4 ”指数 随机 变量 的 卷 积 


令 Xi(i = 1,…,n) 是 分 别 具 有 速率 和 (i = 1,…,n) 的 独立 指数 随机 变 其 , 并 
且 假 设 入 入 ,i 关 j. 随机 变量 2_1 Xi 称 为 亚 指数 随机 变量 . 为 了 计算 它 的 概率 
密度 函数 , 我 们 从 n= 2 开始 . 现在 


t 
fts) = | ful) fle sds 


t 
=| Nie-MtsXae-Xatt-a)ds 
0 


= MMe | eM-X)sds 
o 


a 了 一 (An 一 Xa)t 
ge = (1—e ) 


A 本 和 2 
三 Noe- 
er 忆 现 


当 n=3 时 , 利用 上 式 , 一 个 类 似 的 计算 导出 
3 y :nm 
fxit+xatxs(t) = > 加 太 | 
由 它 推出 如 下 的 一 般 结果 


让 
fsttxa lt) = ConNe At 


i=1 


ie-At 
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其 中 


Cin= 
3 了 I 


现在 我 们 对 n 用 归纳 法 证 明 以 上 的 公式 . 因为 我 们 已 经 对 于 n = 2 建立 了 它 , 假定 
它 对 于 n 成 立 , 我 们 考虑 n+ 1 个 具有 不 同 的 速率 和 i(i = 1,… ,m+1) 的 任意 独立 
指数 随机 变量 Xi. 如 果 有 必要 , 可 以 重 置 标号 Xi 与 Xn+1 使 和 n+1 < 和. 现在 


t 
ftiron td) = | fetta ne mn das 


-co ie-xsA ie-ntatt-ads 


和 关 Mn a 
= D0 (me mt Ne) 


Sd m+1 一 Ai 
= FnHIXn+lie- "+ 二 DCintiNe™™ (5.7) 
这 1 
其 中 Kosl = Li Cin 二 是 一 个 不 依赖 的 常数 但 是 我 们 也 有 


Hat H = | fri Se Mdds 
由 此 推出 , 利用 推导 方程 (5.7) 的 同样 的 方法 , 有 一 个 常数 Ki 使 
n+l 
fxstt Xan lt) = KiNe™ Nt + DCintiNe At 
i=2 


将 fxi+-+xn+i(b 的 两 个 表示 式 取 等 推出 
KnriMntie "Hit+ OntiNe t= KiNe Nt+OntintiMntie "+ 
在 上 面 的 方程 两 边 同 乘 以 e"+1t, 并 且 令 t 一 co 导出 (因为 当 t 一 oo 时 e -On+t 


天 n+1 = Cn+ln+l 
再 用 方程 (5.7) 就 完成 了 归纳 法 . 于 是 我 们 证 明了 , 若 5 = 2 Xi 则 
fslt) = Tome™ (5.8) 


让 1 


其 中 


Cin -I 


j¥i 
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对 fs 的 表达 式 两 边 从 t 到 co 积分 , 导出 $ 的 尾 分 布 函数 为 
P{S>t}=D Cone ~ (5.9) 
i=1 
因此 , 从 方程 (5.8) 和 方程 (5.9) 得 到 5 的 失败 率 函 数 rs(t) 如 下 : 


sl CinNe—~t 


rs(t)= i 


i=1 Cine 
如 果 我 们 令 NM = min( 和 1,… ,和 n), 那么 将 rs(t) 的 分 子 与 分 母 乘 以 est 后 导出 
dm rs(t) = 入 
从 上 式 我 们 能 够 得 出 结论 , 当 t 大 的 时 候 , 一 个 存活 到 年 龄 t 的 亚 指数 分 布 的 部 件 
的 剩余 寿命 近似 于 一 个 指数 随机 变量 , 其 速率 等 于 构成 亚 指数 的 求 和 项 中 的 指数 随 
机 变 基 的 速率 的 最 小 者 . 


注 虽然 
1=| fs(Oat= Po-2H 3 


i=1 j#i 
可 是 不 应 该 将 Cin(i = 1,…,n) 想 成 概率 , 因为 其 中 有 些 是 负 的 . 因此 , 虽然 亚 指数 
密度 在 形式 上 类 似 于 超 指数 密度 (参见 例 5.6), 但 这 两 种 随机 变量 是 非常 不 同 的 
例 5.11 令 和，…,Xm 是 独立 指数 随机 变量 , 分 别 有 速 率 入,… ,和 Am, 其 中 Xi 天 
Ai 天 了 令 N 独立 于 这 些 随机 变 基 ,并且 假设 汪 1 Ps = 1, 其 中 忆 ,=P{N=n}. 
随机 变量 次 
Y= 2 


称 为 考 克 斯 随机 变 基 . 对 N 取 条 件 , 给 给 出 它 的 密度 函数 
fy(t) = > fy (tN = 站 PP 


= >》 fxttxn (tlN =n)P, 
= 》 fxt+xo (EP 


mn 
= PD) OnNe Mt 


n=l i=l 


令 

r(n)=P{N=n|lN > n} 
如 果 我 们 将 N 解释 为 在 离散 时 间 段 测量 的 寿命 , 那么 r(") 表示 一 个 部 件 将 在 使 用 
它 的 第 n 个 的 时 段 失 效 的 条 件 概率 , 条 件 是 已 知 它 已 经 存活 到 这 个 时 间 . 于 是 , r(n) 
是 失败 率 函 数 r(t) 的 离散 时 间 版 本 , 因此 是 离散 时 间 失 败 (风险 ) 率 函 数 . 
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考 克 斯 随机 变量 常常 以 如 下 的 方式 出 现 . 假设 一 个 部 件 必须 经 过 m 个 时 段 处 
理 才能 修复 . 然而 , 假设 每 一 时 段 都 有 一 个 概率 使 该 部 件 离开 这 个 程序 . 如 果 我 们 
假设 部 件 通过 相继 的 时 段 的 时 间 是 独立 的 指数 随机 变量 , 而 一 个 刚 完成 上 个 时 段 的 
部 件 离开 这 个 程序 的 概率 是 (独立 于 它 用 多 久 时 间 通 过 这 n 个 时 段 ) r(n), 那么 一 
个 部 件 花费 在 这 个 程序 中 的 总 时 间 是 一 个 考 克 斯 随机 变量 . 国 
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5.3.1 ”计数 过 程 


一 个 随机 过 程 {N(t),t > 0} 称 为 计数 过 程 , 如 果 N(t) 表示 到 时 刻 t 为 止 发 生 
的 事件 的 总 数 . 计数 过 程 的 一 些 例子 如 下 . 

(a) 如 果 我 们 令 N(t) 等 于 正在 或 早 于 时 刻 t 进 入 一 个 特定 的 商店 的 人 数 , 那么 
{N(t),t > 0} 是 计数 过 程 , 其 中 一 个 事件 对 应 于 一 个 进入 商店 的 人 . 注意 如 果 我 们 
令 N(t) 等 于 在 上 时 刻 进入 店 的 人 数 , 那么 {N(t),t > 0} 不 是 计数 过 程 (为 什么 ). 

(b) 如 果 只 要 一 个 小 孩 诞 生 , 我 们 就 说 一 个 事件 发 生 , 那么 当 N(t) 等 于 时 刻 t 
之 前 诞生 的 总 人 数 时 , {N(t),t > 0} 是 计数 过 程 . (N(t) 包含 在 时 刻 t 之 前 已 经 死 的 
人 吗 ? 解释 为 什么 它 一 定 包含 .) 

(e) 如果 N(t) 等 于 给 定 的 足球 队员 在 时 刻 t 前 进 球 的 个 数 , 那么 {N(t),t > 0} 
是 计数 过 程 . 只 要 该 球员 进 一 个 球 , 这 个 过 程 的 一 个 事件 就 发 生 . 

从 定义 我 们 看 到 , 一 个 计数 过 程 N(t) 必须 满足 : 

(i) N(t) > 0. 

(加 N(t) 取 整 数值 . 

(ii) 若 s < 由 则 NGs) < N(t). 

(iv) 对 于 s < t, N(t) - N(s) 表示 在 区 间 (s, 中 发 生 的 事件 的 个 数 . 

如 果 发 生 在 不 相交 的 时 间 区 间 中 的 事件 的 个 数 是 彼此 独立 的 , 称 计数 过 程 具 有 
独立 增 量 . 例如 , 这 意味 着 发 生 在 时 刻 10 以 前 的 事件 个 数 ( 即 N(10)) 必须 独立 于 
在 时 刻 10 与 15 之 间 发 生 的 事件 个 数 ( 即 N(15) - N(10)). 
独立 增 量 的 假定 对 于 例 (a) 可 能 是 合理 的 , 但 是 对 于 例 (b) 可 能 是 不 合理 的 . 其 
原因 是 , 如 果 在 例 (b) 中 N(t) 非常 大 , 那么 在 时 刻 t 就 可 能 有 许多 人 活着 , 这 使 我 
们 相信 在 时 刻 上 到 t+ s 之 间 新 生 的 人 数 也 很 多 ( 即 N(t) 独立 于 N(t+s) 一 N(t) 看 
起 来 并 不 是 合理 的 , 所 以 例 (b) 中 的 {NN(t),t > 0} 没有 独立 增 基 性 ). 在 例 (c) 中 的 
独立 增 其 假定 可 以 是 合理 的 , 如 果 我 们 相信 足球 队员 今天 进 球 的 机 会 不 依赖 他 过 去 
的 表现 . 如 果 我 们 相信 连续 取胜 或 低 靡 状态 , 这 个 假定 就 不 是 合理 的 . 

如 果 在 任意 时 间 区 间 中 发 生 的 事件 的 个 数 的 分 布 只 依赖 于 时 间 区 间 的 长 度 , 称 
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计数 过 程 具有 平稳 增 量 . 换 句 话说 , 如 果 在 区 间 (s,s +t) 中 的 事件 的 个 数 的 分 布 对 
于 一 切 s 都 相同 , 过 程 具有 平稳 增 其 . 
平稳 增 基 的 假定 只 在 例 (a) 中 合理 , 如 果 一 天 不 存在 人 们 更 可 能 进入 商店 的 时 
间 . 于 是 , 例如 , 如 果 存 在 每 天 的 交通 峰值 时 间 (例如 说 , 中 午 12 点 到 下 午 1 点 之 
间 ), 那么 平稳 增 基 的 假定 是 不 合理 的 . 如 果 我 们 相信 地 球 上 人 口 基本 不 变 (大 多 数 
科学 家 并 没有 这 个 信念 ), 那么 平稳 增 基 的 假定 在 例 (b) 中 可 以 是 合理 的 . 平稳 增 基 
的 假定 在 例 (c) 中 似乎 并 不 是 合理 的 , 因为 大 多 数 人 会 认同 一 件 事 , 足球 队员 在 25 
至 30 的 年 龄 段 中 将 比 他 在 35 至 40 的 年 龄 段 中 可 能 进 更 多 的 球 . 然而 , 在 较 小 的 
时 间 界 限 中 , 例如 一 年 中 , 它 可 能 是 合理 的 . 
5.3.2 ” 泊 松 过 程 的 定义 
最 重要 的 计数 过 程 之 一 是 泊 松 过 程 , 作为 给 出 它 的 定义 的 引子 , 我 们 定义 函数 
j() 是 olh) 的 概念 . 
定义 5.1 ”函数 1(.) 称 为 o(h), 如 果 
， f(h) 
| 
例 5.12 
(a) 函数 f(z) = z? 是 o(h), 因为 


(b) 函数 f(z) = z 不 是 o(h), 因为 
f(h) 


lm = mt lm1=1#0 


(o) 车 fA") 是 olh) 且 9() 是 o(, 则 7() +9() 也 是 ol(h). 这 是 因为 
f(h)+g(h) _ ) f(h) , , g(h) 
i 
(qd) 若 f() 是 o(h), 则 9() = ef() 也 是 o(h). 这 是 因为 
lim 2 0 
0 h 

(e) 由 (c) 和 (d) 得 出 , 若 一 列 函 数 都 是 o(h), 则 它们 的 任意 有 限 线性 组 合 也 是 
o(h). 国 

若 要 函数 f(") 是 o(h), 在 h 趋 于 0 时 f(h)/h 必须 趋 于 0. 但 是 , 如 果 h 趋 于 
0, f(h)/h 趋 于 0 的 唯一 途经 是 f(h) 趋 于 0 比 h 趋 于 0 快 . 即 对 于 小 的 h, f(h) 相 
比 h 必须 很 小 . 


=0+0=0 


5.3 泊 松 过 程 249 


记号 o(h) 的 使 用 可 以 使 命题 更 加 简洁 . 例如 , 若 X 是 密度 为 的 连续 随机 变 
基 , 且 其 失败 率 函 数 为 A(t), 则 近似 的 命题 
Plt<X<t+ 门 = f(t)h 
P(t<X<tt+hlX >t)~ Mh 


人 P(t <X<t+h)= f(t)h+o(h) 


P(t <X<t+hX >t)= Mt)h+ olh) 
现在 我 们 可 以 给 出 泊 松 过 程 的 定义 . 
定义 5.2 ”计数 过 程 {N(t),t > 0} 称 为 具有 速率 和 (和 > 0) 的 泊 松 过 程 , 如 果 
(i) N(0)=0. 
(ii) {N(b,t>0} 过 程 有 平稳 增 基 和 独立 增 其 . 
(iii) P{N(t£+ h) — N(h) = 1} = Mh + o(h). 
(iv) P{N(t+h)— N(h) > 2} = o(h). 
上 面 的 过 程 称 为 泊 松 过 程 , 是 因为 在 任意 长 度 为 t 的 区 间 中 的 事件 个 数 按 均值 为 Xt 
的 泊 松 分 布 , 这 正如 下 述 重要 定理 所 示 . 
定理 5.1 车 {N(t),t >>0} 是 速率 为 和 (和 >0) 的 泊 松 过 程 , 则 对 一 切 s > 0,t > 0， 
NN(s 十 t) 一 NN(t) 是 均值 为 Mt 的 泊 松 随机 变量 . 也 就 是 , 在 任意 长 度 为 的 区 间 中 的 
事件 个 数 是 均值 为 At 的 泊 松 随机 变量 . 
证 明 ”我 们 从 N(t) 的 拉 普 拉 斯 变换 开始 . 为 此 固定 v > 0, 并 且 令 
g(t) = Elexp{—uN(t)}] 
我 们 推导 g(t) 的 一 个 微分 方程 如 下 : 
g(t+h) = Elexp{—uN(t + h)}] 
= Elexp{—uN(t)} exp{—u(N(t+h)— N(t))}] 
= Elexp{ 一 uN(t)HE[lexp{ 一 u(N(t+h) 一 N(t))i 由 独立 增 量 性 
= g(t)Elexp{—u(N(t+h)— N(t)))] (5.10) 
现在 , 由 定义 5.2 中 的 公理 (证 ) 和 (iv) 推出 
P{N(t+h)— N(t)=0}=1— M+o(h) 
P{N(t+h)— N(t)=1}= M+o(h) 
P{N(t+h)— N(t) > 2} = o(h) 
因此 , 对 于 N(h) =0, N(h) =1, N(h) > 2 取 条 件 , 引出 
Elexp{—ulN(t+h)— N(t)]}] =1— M+o(h) +e— “(Mh + o(h)) + o(h) 
=1— M+e- "Mh+o(h) (5.11) 
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所 以 , 由 方程 (5.10) 和 方程 (5.11) 我 们 得 到 
g(t+h) = g(t)(1+ Mh(e™™ — 1))+o(h) 
由 此 推出 


+ 0) =g( Me 1)+ 


o(h) 
hh 
令 h 一 0, 给 出 
g(t) = g(t) Me —1) 

或 者 , 等 价 地 

KAY) 

g(t) 
注意 由 左 方 是 Ing(t) 的 导数 , 积分 后 推出 

In(g(t)) = Ae™* — Dt+C 
因为 9(0) = Ele-*w(@oO] =1, 由 此 推出 C =0, 所 以 N(t) 的 拉 普 拉 斯 变换 是 
Ele—*N 0] = g(t) = ee ™"-)) 
然而 , 若 X 是 均值 为 Xt 的 泊 松 随机 变 基 , 则 它 的 拉 普 拉 斯 变换 是 
Ele-**]= De ie- XA /i 


i 
=e-X Pte) = @-MeMe™™ ~ eMt(e—"*-1) 
尖 


= Me -1) 


因为 拉 普 拉 斯 变换 唯一 地 确定 了 分 布 , 我 们 可 以 得 出 N(t) 是 均值 为 Xt 的 泊 松 随机 
变 其 的 结论 . 

为 了 证 明 N(s +t) - N(s) 也 是 均值 为 Xt 的 泊 松 随机 变 基 , 我 们 固定 s, 令 
Ns(t) = N(s 十 t) 一 NN(s), 它 等 于 当 我 们 从 时 刻 s 开始 计数 起 , 首 个 时 间 单 位 t 中 的 
事件 数 . 现在 可 直接 验证 {Ns(t),t > 0} 满足 速率 Xt 的 泊 松 过 程 的 一 切 公 理 . 因此 
Es 可 得 出 Ns(t) 服从 均值 Mt 的 泊 松 分 布 . 国 
注 (i) N(t), 或 者 更 一 般 地 N(s 二 菇 一 N(s), 具有 泊 松 分 布 的 结果 是 二 项 分 布 的 泊 
松 近似 2.2.4 节 ) 的 一 个 推论 . 为 了 看 清 这 点 , 可 将 区 间 [0, 分 成 尺 等 分 , 其 
中 大 非常 大 (图 5.1). 现在 用 定义 5.2 中 的 公理 (iv) 可 以 证 明 , 如 果 上 递增 至 oo, 在 
个 子 区 间 中 的 任意 一 个 中 有 两 个 或 两 个 以 上 事件 的 概率 趋 于 0. 因此, N(t) (以 趋 
于 1 的 概率 ) 正好 等 于 含有 一 个 事件 的 子 区 间 的 个 数 . 然而 , 由 平稳 增 量 和 独立 增 
量 性 可 知 , 该 个 数 具 有 参数 为 上 和 卫 = 闫 十 o (是 ) 的 二 项 分 布 . 因此 , 由 令 大 趋向 oo 
以 及 二 项 分 布 的 泊 松 近似 定理 , 通过 利用 o(h) 的 定义 和 当 大 一 oo 时 二 一 0, 我们 
可 得 N(t) 具有 均值 
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Ne ,to(t/k) 
dat [+ (| = x+am t/K 
三 此 
的 泊 松 分 布 . 
(区 因为 对 一 切 s, N(s+t) 一 N(s) 具有 相同 的 分 布 , 由 此 推出 泊 松 过 程 具 有 平 
稳 增 量 . 


二 
0 


~~ 
十 
x 


图 5.1 


5.3.3 ”到 达 间 隔 时 间 与 等 待 时 间 的 分 布 
考虑 一 个 泊 松 过 程 , 我 们 将 第 一 个 事件 到 达 的 时 间 记 为 五 . 此 外 , 对 于 m > 1， 
以 mr 记 在 第 n 一 1 个 事件 与 第 个 事件 之 间 用 去 的 时 间 . 序列 {Th,n = 1,2,…} 
称 为 到 达 问 隔 时 间 列 . 例如 , 车 Ti = 5 而 T2 = 10, 则 泊 松 过 程 的 第 一 个 事件 发 生 在 
时 刻 5, 而 第 二 个 事件 发 生 在 时 刻 15. 
现在 我 们 来 确定 Tv 的 分 布 . 为 此 , 我 们 首先 注意 事件 {Ti > 甘 发 生 当 且 仅 当 
泊 松 过 程 在 区 间 [0,4] 中 没有 事件 发 生 , 从 而 
P{T1 >t}=P{N(t)=0} =e-* 
因此 , TI 具有 均值 为 1/A 的 指数 分 布 . 现在 
P{T2 >t} = EIlP{T > tIT1}] 
然而 
P{T2 >tm = s} = P{(s,s 二 4 中 0 个 事件 |Ti = s} 
三 P{(s,s 十 相 中 0 个 事件 )} 
一 6 站 (5.12) 


其 中 最 后 两 个 等 式 由 独立 增 基 性 与 平稳 增 基 性 得 到 .所 以 , 从 方程 (5.12) 得 出 结 
论 : Ts 也 是 一 个 均值 为 1/A 的 指数 随机 变 基 , T2 独立 于 Ti. 重复 同样 的 论证 导出 
下 面 的 命题. 

命题 5.2 Th(n = 1,2,…) 是 独立 同 分 布 的 指数 随机 变量 , 具有 均值 1/ 入 . 

注 ”这 个 命题 并 不 使 我 们 感到 惊奇 . 平稳 增 量 和 独立 增 量 的 假定 本 质 上 等 价 于 断 
定 在 时 间 的 任意 点 , 过 程 概率 意义 下 重新 开始 . 即 过 程 从 任意 点 往 后 , 独立 于 它 以 
往 发 生 的 一 切 (由 独立 增 量 性 ), 而 且 也 有 与 原 过 程 相同 的 分 布 (由 平稳 增 量 性 ). 换 
名 话说, 过 程 没有 记忆 , 因而 指数 间隔 时 间 是 预期 的 . 
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另 一 个 我 们 所 关注 的 量 是 第 ”个 事件 到 达 的 时 间 Sn, 也 称 为 直到 第 n 个 事件 
的 等 待 时 间 . 容易 看 出 
SD 1 
i=1 
因此 由 命题 5.2 和 2.2 节 的 结果 推出 , Sn 具有 参数 为 n 和 和 的 伽 马 分 布 . 即 Sn 的 


概率 密度 为 
(Abn-! 


(TD 
方程 (5.13) 也 可 以 如 下 推导 , 只 要 注意 第 n 个 事件 在 时 刻 t 前 发 生 当 且 仅 当 直 到 t 
为 止 发 生 事件 的 个 数 至 少 是 n, 即 


N(t)>n 会 Sngt 


fs,(t) = Xe t>0 (5.13) 


因此 Ee 
Fs,(t) =P{Sn <t}=P{N(t) >n} = De™ 


j=n 


Qe)’ 
疯 ” 
由 它 求 微分 导出 

区 的 = 入 et 2 是 > -Mt 3 


jan =n 
n—l oo. 7 一 1 j 
-Xt Me | 5 所 5 -Ex 人 
人 tm- 和 
(n—1)! 
例 5.13 ”假设 每 天 人 们 以 速率 为 和 = 1 泊 松 分 布 移民 进入 某 个 领土. 
(a) 直到 第 10 个 移民 到 达 的 时 间 的 期 望 是 多 少 ? 
(b) 第 10 个 移民 到 达 和 第 11 个 移民 到 达 之 间 的 时 间 超 过 2 天 的 概率 是 多 少 ? 
解 (a) ElSio] = 10/ 和 = 10 天 . 
(b) P{mia > 2} = e-2、 = e-2 o~ 0.135. 图 
命题 5.2 也 给 我 们 另 一 种 方式 定义 泊 松 过 程 . 假设 我 们 有 均值 为 1/A 的 独立 同 
分 布 的 指数 随机 变量 列 {T,n > 1}. 现在 我 们 定义 一 个 计数 过 程 , 称 过 程 的 第 n 个 
事件 在 时 间 


人 


= Me 


Sn 三 全 十 7 十 … 十 T 


发 生 . 最 终 的 计数 过 程 {N(t),t > 0}9 就 是 速率 为 和 的 泊 松 过 程 . 
注 ” 另 一 个 得 到 Sn 的 密度 函数 的 途经 是 , 由 于 Sn 是 第 nn 个 事件 的 时 间 , 所 以 有 


”- 藉 NG 的 形式 定义 由 NG 三 max{n : Sn 和 甘 给 出 , 其 中 So 三 0. 
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P{t< Sn <t+h}=P{N(t)=n-1, 在 (tt 十 各 中 有 一 个 事件 } + o(h) 
=P{N( =n 一 1}P{ 在 (t,t 十 h) 中 有 一 个 事件 } + o(h) 
ex 本 je + o(h) 
es OD 
人 一 

其 中 第 一 个 等 式 用 了 在 (t,t+h) 中 有 两 个 或 两 个 以 上 事件 的 概率 为 o(h) 这 个 事实 . 
如 果 我 们 将 上 面 的 方程 两 边 除 以 h, 并 令 h 一 0， ei 
eX (CAb" 

(n—1)! | 


Ty Li | 4 


fs, lt) = 


5.3.4 ” 泊 松 过 程 的 进一步 性 质 


考虑 一 个 速率 为 和 的 泊 松 过 程 {N(t),t > 0}, 而 且 假 设 每 次 发 生 的 事件 分 为 I 
型 事件 和 II 型 事件 . 进一步 假设 每 个 事件 独立 于 所 有 其 他 事件 , 以 概率 p 为 I 型 事 
件 , 以 概率 1 - 2 为 II 型 事件 . 例如 , 假设 顾客 按照 速率 为 和 的 泊 松 过 程 到 达 一 个 
商店 , 并 且 假 设 每 个 到 达 的 顾客 以 概率 1/2 为 男性 , 而 以 概率 1/2 为 女性 . 那么 I 型 
事件 对 应 于 一 个 男性 到 达 , 而 工 型 事件 对 应 于 一 个 女性 到 达 . 
以 Nil(t) 和 Nz(b 分 别 记 在 [0,4] 发 生 的 工 型 事件 和 I 型 事件 的 个 数 ， 注 意 
N(t) = Ni(t) + N2(t). 
命题 5.3 {Ni(t),t > 0} 和 {JN2(t),t > 0} 两 者 分 别 是 速率 为 Xp 和 和 (1 一 p) 的 泊 
松 过 程 . 此 外 , 这 两 个 泊 松 过 程 是 彼此 独立 的 . 
证 明 ”通过 检验 它 满足 定义 5.2, 容易 验证 {Ni1(t),t>0} 是 速率 为 Xp 的 泊 松 过 程 ， 
。Ni(0) = 0 得 自 事实 N(0) = 
。 容易 看 出 【Nib),t > 0} 继承 了 过 程 {N(t),t > 0} 的 平稳 和 独立 增 量 性 质 . 
这 是 因为 在 一 个 区 间 中 的 工 型 事件 的 个 数 的 分 布 可 以 由 取 条 件 于 这 个 区 间 
中 的 事件 个 数 得 到 , 而 后 一 个 基 的 分 布 只 依赖 于 区 间 的 长 度 , 并 且 与 任意 与 
它 不 相交 的 区 间 中 发 生 的 事件 是 独立 的 . 
。P{N(O=I =P{N(h) = 1IN(h) = 1}P{N(A) =1} 
+ P{Ni(h) = 1|N(h) > 2}P{N(h) > 2} 
= p(M + o(h)) +o(h) = Mph + o(h) 


® P{Ni(h) > 2} < P{N(h) > 2} = o(h) 
于 是 我 们 看 到 {Ni(t),t > 0} 是 速率 为 Xp 的 泊 松 过 程 , 而 用 类 似 的 推理 可 得 , {N2(t)， 
t > 0} 是 速率 为 和 (1 一 p) 的 泊 松 过 程 . 因为 I 型 事件 在 从 t+ 到 t+h 的 区 间 中 的 概率 
独立 于 与 (t,t 十 hh) 没有 重合 的 区 间 中 发 生 的 所 有 事件 , 它 独 立 于 II 型 事件 何 时 发 
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生 交 事实 ,这 了 证 明了 两 个 育 松 过 和 是 下 立 的 .对 于 另 一 个 证 明 政 立 人 的 兴 经 , 参 
见 例 3.23.) 

例 5.14 “如果 移民 以 每 星期 10 人 的 党 检 速 到达 A 地 区 关 生 个 闪 民 是 区 天 
后 毅 的 概率 是 1/12, 那么 在 二 月 份 没有 英格兰 后 背 移 民 到 A 地 区 的 概率 是 多 少 ? 
解 由 上 面 的 命题 推出 , 在 二 月 份 英格兰 人 移民 到 A 地 区 的 人 数 是 均值 为 4x 10x 
评 = 如 的 泊 松 分 布 . 因此 所 需要 的 梳 率 是 e- 侍 ~ 0.036. 四 


例 5.15 ”假设 购买 你 想 出 售 的 部 件 的 非 负 出 价 以 速率 为 和 的 泊 松 过 程 到 达 . 假定 
每 次 出 价 是 具有 密度 函数 f(z) 的 随机 变量 的 值 . 一 旦 出 价 提供 给 你 , 你 必须 接受 或 
者 拒绝 并 等 待 下 一 个 出 价 . 假设 部 件 卖 出 以 前 , 你 以 每 个 单位 时 间 e 的 速率 需要 花 
费 , 而 你 的 目标 是 使 你 的 期 望 总 回报 最 大 , 其 中 总 回报 等 于 收 到 的 钱 的 数目 减 去 总 
的 花费 价格 . 假设 你 使 用 的 策略 是 , 接受 第 一 个 超过 某 个 特定 值 y 的 出 价 . (这 种 类 
型 的 策略 称 为 y 策略 , 可 以 证 明 它 是 最 优 的 .) y 的 最 优 值 是 多 少 ? 
解 ”我 们 计算 当 你 使 用 y 策略 时 的 期 望 总 回报 , 并 且 选 取 y 使 之 最 大 . 以 X 记 一 
个 随机 出 价 的 值 , 而 以 F(z) = P(X > z) =| f(w)du 记 它 的 尾 分 布 函数 . 因为 每 
次 出 价 以 概率 F(y) 大 于 y, 这 就 推出 这 种 出 价 按 速率 为 AF(y) 的 泊 松 过 程 发 生 . 因 
此 , 直到 一 次 出 价 被 接受 的 时 间 是 一 个 速率 为 AF(y) 的 指数 随机 变量 . 以 R(y) 记 
从 接受 首次 超过 y 的 出 价 的 策略 得 到 的 总 回报 , 我 们 有 
E[R(y)] = E[ 接 受 出 价 ]-cE[ 到 接受 的 时 间 ] 
c 
= EXIX>Y-— ye 
mr | ZjfxIx>y(z)dz — 于 
和 c 
| 0- 
| zjf(z)dz — c/A 
yy 


= (5.14) 


求 微分 导出 

Ela =0% -Fou + (| f(r —$) 1 =0 
所 以 ,y 的 最 优 值 满 中 

= | wdoe2 | N= 

m=] fa 或 vo] fd = | fa 
或 
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厂 (e—W/(e)dr = $ 


不 难 证 明 存 在 唯一 的 y 满足 上 述 方程 因此, 最 佳 策略 是 接受 首 个 超过 y* 的 出 价 
其 中 满足 下 式 
[ -wrae = /A 
隐 
将 y= 代入 方程 (5.14), 可 得 到 最 佳期 望 净 回报 就 是 
ee 
EIR(y")] = wr (le ye +) f(a)dz -o) 
-a (Le-wreatr [son) 
= B+ WE) 一 ce 人 
= 

于 是 最 佳 临界 信也 是 最 佳期 户 回 报信 ,为 了 弄 清 为 什么 是 这 样 , 令 m 为 最 佳期 望 加 
报 值 , 并 注意 , 当 拒绝 一 个 出 价 时 , 问题 基本 上 就 重新 开始 , 所 以 由 此 继续 的 最 佳 临 
界 值 也 是 最 佳期 望 回报 值 m. 但 是 , 这 北 涵 了 当 且 仅 当 它 至 少 和 m 一 样 大 , 接受 的 
出 价 是 最 佳 的 , 这 就 说 明了 m 是 最 佳 临界 值 四 

由 命题 5.3 推出 , 如 果 个 体 的 每 个 泊 松 数 分 别 以 概率 p 和 1 一 独立 地 分 类 为 
两 个 可 能 的 组 , 那么 每 一 组 的 个 体 数 是 独立 的 泊 松 随机 变 基 ,因为 这 个 结果 容易 扒 
广 到 分 类 到 个 可 能 的 组 的 任意 一 个 的 情形 , 我 们 有 下 面 的 应 用 , 即 一 个 组 织 中 雇 
员 流动 的 模型. 
例 5.16 ”考察 一 个 系统 , 无 论 何 时 其 中 的 个 体 都 被 分 类 为 处 于 个 可 能 的 状态 之 
一 ,并 假定 个 体 按 转移 概率 为 Py(i,j = 1,…,7) 的 一 个 马尔 可 夫 链 改变 其 状态 . 即 
若 个 体 处 于 状态 则 下 一 个 时 间 段 独立 于 它 以 前 的 状态 以 概率 P) 处 于 状态 地 个 
体 在 系统 中 的 变动 是 彼此 独立 的 . 假设 开始 时 处 于 状态 1,2,.…,7 的 个 体 数 分 别 是 
均值 为 和 ,A2,…, 和; 的 独立 的 泊 松 随机 变 基 .我们 想 要 确定 在 某 个 时 刻 n 处 于 状 
态 1,2,…,r 的 个 体 数 的 联合 分 布 . 
解 ” 对 于 固定 的 二 以 N()( = 1.…,7) 记 开始 处 于 状态 i 且 在 时 刻 n 处 于 状态 
j 的 个 体 数 . 开始 处 于 状态 ;的 每 个 个 休 ( 泊 松 分 布 的 ) 彼此 独立 地 以 概率 P 在 时 
刻 n 处 于 状态 j, 其 中 Ps 是 具有 转移 概率 P 的 马尔 可 夫 链 的 n 步 转移 概率 . 因 


此 , Nj(i)(j = 1…,7) 是 速率 为 和 PB(j = 1,…,7) 的 独立 泊 松 随机 变量 . 因为 独立 
泊 松 随机 变 其 的 和 本 身 也 是 泊 松 随机 变量 , 这 就 推出 在 时 刻 n 处 于 状态 j 的 个 体 数 
( 即 疡 NiG) 将 是 以 学 ;_ 和 PB 为 速率 的 独立 泊 松 随机 变量 , j=1,…,7，。 国 


例 5.17 (奖券 收集 问题 ) 有 m 种 不 同类 型 的 奖券 . 独立 于 过 去 得 到 的 奖券 某 人 
每 次 以 概率 p; ( 于? ;Pi = 1) 收集 一 张 类 型 ; 的 奖券 . 以 N 记 他 为 了 每 种 类 型 至 
少 有 一 张 的 全 套 收藏 所 需要 收集 的 奖券 的 张 数 . 求 EIN]. 
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解 ” 如 果 我 们 以 NN; 记得 到 类 型 7 的 奖券 必须 收集 的 奖券 张 数 , 那么 我 们 可 以 将 N 
表示 为 


N= max Nj 
lgjsm 


然而 , 即使 每 个 N; 是 以 p; 为 参数 的 几何 随机 变 基 , N 的 上 述 表示 并 非 那么 有 用 ， 
因为 随机 变 基 Ni 不 是 独立 的 . 

然而 , 我 们 可 以 将 问题 转化 为 确定 独立 随机 变量 的 最 大 值 的 期 望 值 问题 ， 为 
此 , 假设 奖券 收集 的 时 间 是 按 速 率 为 = 1 的 泊 松 过 程 选取 的 . 如 果 此 时 得 到 类 
型 j 的 奖券 , 就 称 这 个 泊 松 过 程 的 一 个 事件 为 类 型 j(1 < j < m)， 现在 我 们 以 
Ni 区 记 在 直到 时 刻 t 为 止 收集 到 的 类 型 j 的 奖券 的 张 数 , 那么 由 命题 5.3 推出 
{Nj(t),t 之 0}(j = 1,…,m) 是 以 Mp; = pj; 为 参数 的 独立 的 泊 松 过 程 . 以 X; 记 第 j 
个 过 程 的 首 个 事件 的 时 间 , 并 且 令 


X= max Xj 
lgjsm 


记 收集 到 全 套 收藏 的 时 间 . 因为 Xi 是 分 别 以 p; 为 速率 的 独立 指数 随机 变量 , 这 就 
推出 


P{X<t}= P{ ma Xj; <t} 


Set < 由 对 于 j=1,…,m} 


-1 (1 —e™?st) 


j=1 


所 以 > 
xl= | Pe > = Io- }a (5.15) 
j=1 


余下 的 是 将 直到 他 有 全 套 奖券 的 时 间 的 期 望 E[X], 与 收集 到 的 奖券 的 期 望 数 ELN] 
联系 起 来 , 这 可 以 由 奖券 计数 的 泊 松 过 程 的 第 i 个 间隔 时 间 7; 得 到 . 于 是 容易 看 到 
N 


X= 
j=l 


由 于 Ti 是 速率 为 1 的 独立 指数 随机 变 其 , 而 N 是 独立 于 ZT 的 ,所 以 
EIXIN] = NE[T] = 
所 以 
EIX] = EIN] 
从 而 EIN] 由 方程 (5.15) 给 出 . 
我 们 现在 计算 在 全 套 收集 中 只 出 现 一 张 的 类 型 数 的 期 望 . 令 到 等 于 1, 如 果 在 
最 后 的 全 套 中 只 有 一 张 奖券 i, 而 在 其 他 情形 令 它 为 0. 于 是 我 们 需要 知道 


5.3 泊 松 过 程 257 


E | > | = SEI = SP =1} 
i=1 i=1 i=1 
现在 , 如 果 每 一 种 类 型 的 奖券 在 类 型 i 奖券 第 二 次 出 现 前 已 经 出 现 , 那么 在 最 后 的 
全 套 中 将 只 有 一 张 奖券 i. 于是, 以 5; 记得 到 第 二 张 类 型 i 奖券 的 时 间 , 我 们 有 
P{ 五 =1} = P{X < Si 对 于 一 切取 计 .4 
利用 5; 具有 参数 为 (2,pi) 的 伽 马 分 布 , 推出 
P{h=1}= 全 P{Xi < Si, 对 于 一 切 了 天 让 Si = zjpie-mzpizdz 
网 P{Xj < z, 对 于 一 切 j 六 jp?ve-?'*dz 
0 


oo 
= | IIa 一 emz)pzze-Pzdz 
o 


天 


所 以 , 我 们 有 结果 
E ;3 4 二 人 pl 一 e-Piz)p?ze-Pzdz 
i=1 


i=] j#i 
闫 -; SW 
= sla-e "RT . 


下 一 个 我 们 要 确定 的 有 关 泊 松 过 程 的 概率 计算 是 , 一 个 泊 松 过 程 中 n 个 事件 
的 发 生 先 于 另 一 个 与 之 独立 的 泊 松 过 程 中 m 个 事件 的 发 生 的 概率 . 更 正式 地 ， 令 
{Ni(t),t > 0} 和 {N2(t),t > 0} 是 分 别 具 有 速率 入 和 Xo 的 独立 泊 松 过 程 . 再 以 53 
记 第 一 个 过 程 的 第 n 个 事件 发 生 的 时 间 , 而 以 52, 记 第 二 个 过 程 的 第 m 个 事件 发 
生 的 时 间 . 我 们 求 

P{S! < 52,} 

对 于 一 般 的 n 和 m, 在 试图 计算 它 之 前 , 先 考虑 n = m = 1 的 特殊 情形 . 由 于 
Nilt) 过 程 的 首 个 事件 发 生 的 时 间 Si 与 Na(t) 过 程 的 首 个 事件 发 生 的 时 间 中 是 
均值 分 别 为 1/ 和 1 和 1/X2 的 指数 随机 变 基 (由 命题 5.2), 从 5.2.3 节 推出 

和 
ptg < 0} = 7 
我 们 现在 考虑 Ni(t) 过 程 中 两 个 事件 的 发 生 先 于 N2(t) 过 程 中 单个 事件 的 发 生 的 概 
率 , 即 P{53 < 5?}. 计算 的 推理 如 下 : 为 了 Na(t) 过 程 有 两 个 事件 先 于 在 N2(t) 过 
程 中 单个 事件 发 生 , 首先 必须 发 生 的 初始 事件 是 Ni(t) 过 程 的 事件 (由 方程 (5.16)， 
这 以 概率 Xi/(Ai + 和 2) 发 生 )， 现 在 给 定 初始 事件 出 自 Ni(t) 过 程 , 对 于 53 小 于 
5 下 一 个 必须 发 生 的 第 二 个 事件 也 是 Ni(b 过 程 的 一 个 事件 . 然而, 在 第 一 个 事 


(5.16) 
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件 发 生 后 , 两 个 过 程 都 重新 开始 (由 泊 松 过 程 的 无 记忆 性 ), 因此 这 个 条 件 概率 也 是 
Ai/(Ai + Xa). 于 是 需要 求 的 概率 给 出 为 
2 
P{S3 < 5S?} = Gi) 

事实 上 这 个 推理 显示 了 , 独立 于 以 前 发 生 的 所 有 情况 , 每 个 事件 以 概率 和 1/( 和 1 十 
和 2) 是 Ni(t) 过 程 的 事件 , 而 以 概率 和 2/( 和 1 十 和 2) 是 N2(t) 过 程 的 事件 . 换 句 话说 ， 
Ni(t) 过 程 到 达 n 先 于 N2(t) 过 程 到 达 m 的 概率 , 正 是 在 抛掷 一 枚 以 概率 p = 
Ai/(Al + Xz) 出 现 正面 的 硬币 时 出 现 n 次 正面 先 于 m 次 反面 的 概率 . 但 是 , 注意 这 
个 事件 发 生 当 且 仅 当前 n+m 一 1 次 抛 挪 中 有 n 次 或 更 多 的 正面 , 我 们 得 到 所 需要 
的 概率 为 

ntm—l ni+m—l 避 加 i nt+m—1—k 
P{s < 5%}= 之 ( 大 ) (#3) CS) 


k=n 


5.3.5 ”到 达 时 间 的 条 件 分 布 
假设 被 告知 直到 时 间 t 为 止 泊 松 过 程 的 事件 恰好 发 生 一 个 , 而 我 们 要 确定 这 个 
事件 发 生 的 时 间 的 分 布 . 现在 , 由 于 泊 松 过 程 有 平稳 和 独立 增 莽 , 在 [0, 中 每 个 相 
等 长 度 的 区 间 应 该 有 相同 的 概率 包含 这 个 事件 . 换 句 话说 , 事件 发 生 的 时 间 应 该 均 
匀 地 分 布 在 [0,4] 上 . 这 是 容易 检查 的 , 因为 对 于 s <t 
PIT < oNGO =1} = MD SSN = 


P{N(t) = 1} 
_ P{[0,s) 中 1 个 事件 , [s,] 中 0 个 事件 } 
EN =1} 


_ P{[0,s) 中 1 个 事件 }P{[s, 中 0 个 事件 } 
P{N(t) = 1} 
Ase—*se—\(t—s) 

和 Ate 一 人 


s 
芝 
这 个 结果 可 以 推广 , 但 是 在 此 之 前 我 们 需要 引进 次 序 统计 基 的 概念 
令 员 ，… 了 5 是 元 个 随机 变 基 ， 我 们 说 Yiy),…, Yn) 是 对 应 于 六 ，…,Y 的 
次 序 统计 其 , 如 果 Yin) 是 在 六 ,…,Y。 中 第 个 最 小 的 值 ， 例 如 , 车 n = 3 而 
六 = 和 4 为 =5, 罗 =1, 则 Yi)=1,Y) =4,Y4s)=5. 如 果 六 (i=1,…,n) 是 具有 概率 密 
度 了 的 独立 同 分 布 的 连续 随机 变 基 , 那么 次 序 统计 其 Yi1),… ,Yi 的 联合 密度 为 


f(y ya Yn) = Tf < < < 


1 
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上 式 的 得 到 是 由 于 

人 如果 (六 ，,… ,Yh) 等 于 (1,… ,yn) 的 中 个 排列 中 的 任意 一 个 , 那么 (YaD 
Yin)) 将 等 于 (加 am 

(i 当 科 ,… in 是 1,2,…,n 的 一 个 排列 时 ，( 瑟 ，…… 丈 ) 等 于 (ya，…,4i,) 的 
概率 密度 是 [Ti-; f (wi) = II-: f (wi)- 

如 果 Yi(i = 1,…,n) 都 在 (0, 上 均匀 分 布 , 那么 从 前 面 可 得 次 序 统计 基 
Yiy),…, Xin) 的 联合 密度 函数 是 

f(y1, Ya, Yn) = 0<mn<y<<yn <t 

现在 我 们 为 以 下 的 有 用 定理 做 好 了 准备 . 
定理 5.2 ”给 定 NN(t) = n,n 个 到 达 时 间 5S1,…,Sn 与 nn 个 在 (0,t) 上 均匀 分 布 的 
独立 随机 变量 所 对 应 的 次 序 统计 量 有 相同 的 分 布 . 
证 明 ”为 了 得 到 给 定 N(t) =n 时 S:，……,Sn 的 条 件 密度 , 注意 对 于 0 < sl < … < 
sn < 事件 {51 = s1,…,Sn = sn, NN(t) =n} 等 价 于 前 +1 个 到 达 间隔 时 间 满 足 
= 58172 = 82 一 5s1… ,Tn = sn 一 sn-1,Tn+l > 一 sn 这 个 事件 . 因此 , 利用 命题 
5.2, 我 们 有 : 给 定 N(t) =n 时 51,…,5n 的 条 件 联 合 密度 为 


_ f(s , sn,n) 
f(s1,.** ,snln) = P{N() =n} 
Me—M1 Xe- Msz-sa) ... Ae—A(sn—sn—1)e—A(t—sn) 
2 erAt(At)mn/ml 


所 0<si<:::<sn<t 


这 就 证 明了 结论 . 站 
注 上面 的 结论 通常 可 以 表述 为 , 在 (0,tj 中 已 经 发 生 nn 个 事件 的 条 件 下 , 事件 发 
生 的 时 间 51,.…, Sn( 考 虑 为 无 次 序 的 随机 变量 时 ) 是 在 (0,) 上 独立 均匀 地 分 布 的 . 
定理 5.2 的 应 用 ( 泊 松 过 程 的 抽样 ) 在 命题 5.3 中 , 我 们 证 明了 : 如 果 泊 松 过 程 的 每 
一 个 事件 被 独立 地 以 概率 分 类 为 型 事件 , 以 概率 1 一 p 分 类 为 I 型 事件 , 那么 I 
型 事件 和 工 型 事件 的 计数 过 程 是 分 别 以 Xp 和 和 (1 一 p) 为 速率 的 相互 独立 的 泊 松 过 
程 . 然而 , 现在 假设 有 种 可 能 类 型 的 事件 , 而 一 个 事件 被 分 类 为 类 型 i(i = 1,…, 
事件 的 概率 依赖 于 事件 发 生 的 时 间 . 特别 地 , 假设 若 一 个 事件 在 时 刻 y 发 生 , 则 独 
立 于 以 前 发 生 的 任何 事件 , 它 将 以 概率 Pi(y)(i = 1,…,k) 被 分 类 为 类 型 i 事件 , 其 
中 学, Pi(y) = 1. 利用 定理 5.2, 我 们 可 以 证 明 以 下 的 有 用 命题 

命题 5.4 ”如果 Ni(t)(i = 1,…,k) 表示 到 时 刻 t 为 止 类 型 i 事件 发 生 的 个 数 ,那么 
Ni(t)(i = 1,…,k) 是 具有 均值 


EINs(b] = 入 | Pi(s)ds 
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的 独立 泊 松 随机 变量 . 

在 证 明 这 个 命题 前 , 让 我 们 首先 阐述 它 的 应 用 . 
例 5.18 (无 穷 条 服务 线 的 排队 问题 ) 假设 顾客 按 速率 为 和 的 泊 松 过 程 到 达 服 务 站 . 
到 达 后 的 顾客 立刻 在 无 穷 条 可 能 的 服务 线 中 的 一 条 接受 服务 , 服务 时 刻 假定 是 独立 
的 , 具有 共同 的 分 布 G. 到 时 刻 t 为 止 完成 服务 的 顾客 数 X(t) 的 分 布 是 什么 ? 在 时 
刻 t 接 受 服务 的 顾客 数 Y(t) 的 分 布 是 什么 ? 

为 了 回答 上 面 的 问题 , 让 我 们 将 进入 的 顾客 称 为 I 型 顾客 , 如 果 直 到 时 刻 t 为 
止 他 完成 了 服务 ; 而 称 为 I 型 顾客 , 如 果 直 到 时 刻 t 为 止 他 没有 完成 服务 . 现在 , 一 
个 在 时 刻 s(s < t) 进入 的 顾客 , 如 果 他 的 服务 时 间 少 于 t+- s, 那么 他 将 是 I 型 顾客 . 
由 于 服务 时 间 的 分 布 是 G, 其 概率 是 G(t - s). 类 似 地 , 一 个 在 时 刻 s(s < t) 进入 的 
顾客 是 II 型 顾客 的 概率 是 G(t 一 s) = 1 一 G(t 一 s). 因此 , 由 命题 5.4, 直到 时 刻 t 为 
止 完成 服务 的 顾客 数 X(t) 的 分 布 是 均值 为 


t t 
E[X(t)] = | G(lt— s)ds = 让 Gly)dy (5.17) 
的 泊 松 分 布 . 类 似 地 , 在 时 刻 t 接受 服务 的 顾客 人 数 Y(t) 的 分 布 是 均值 为 
t t 
ElY(t) = 站 Glt—s)ds= | Glty)dy (5.18) 


的 泊 松 分 布 . 此 外 X(t) 和 Y(t) 是 独立 的 . 

假设 现在 我 们 想 要 计算 Y(t) 和 Y(t + s) 的 联合 分 布 , 即 在 时 刻 t 和 时 刻 t+ s 
系统 中 的 人 数 的 联合 分 布 . 为 了 计算 它 , 称 一 个 到 达 为 

类 型 1: 如 果 顾 客 在 t 前 到 达 , 而 且 在 t 和 t+s 之 间 完 成 服务 ; 

类 型 2, 如 果 顾 客 在 上 前 到 达 , 而 且 在 上 + s 后 完成 服务 ; 

类 型 3: 如 果 顾 客 在 上 和 t+ s 之 间 到 达 , 而 且 在 上 + s 后 完成 服务 ; 

类 型 4: 其 他 情形 . 
因此 一 个 在 时 刻 y 的 到 达 是 类 型 i 的 概率 Pi(y) 为 

no-{ Glt+s- 切 -GL- 力 ， 若 y<t 
0， 其 他 


1 am-{ CE 若 y<t 


其 他 
_ J Glt+s-y)， 若 t<y<t+s 
no- 人 其 他 


Ply) =1— Pi(y) — P(y) — Ps(y) 
因此 , 如 果 以 Ni = Ni(t 十 s)(i = 1,2,3) 记 发 生 的 类 型 i 的 事件 数 , 那么 由 命题 5.4， 
Ni = 1,2,3) 是 分 别 以 
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t+s 
EMI=2| PWay, i=12,3 
0 


为 均值 的 独立 泊 松 随机 变量 . 因为 
Y(b=Ni+N，Ylt+s)= Na+Na 
现在 就 很 容易 计算 Y(t) 和 Y(t+ s) 的 联合 分 布 . 例如 ， ! 
Cov[Y (t), Y(t + s)] = Cov(Ni + Nz, Na2 + Ns) 
三 Cov(N2,N2) 由 Ni,N2, Nas 的 独立 性 
=Var(N2)= | Gl(t+s—ydy= 站 Glut+s)du 


其 中 最 后 的 等 式 是 由 泊 松 随机 变量 的 方差 等 于 它 的 均值 , 并 由 替换 = t 一 y 得 到 
的 . 此 外 , Y(t) 和 了 (t+s) 的 联合 分 布 如 下 : 
P{Y(t)=iY(t+s)=j}=P{N + N2=i,N2+ Ns =) 
min(i,j) 
= 和 PMLNM =i-hN i- 
1=t 
i 
= >》 P{N=!}P{Ni =i-l}P{Ns =j-!)} 

1=0 
例 5.19 (不 准 超车 的 单车 道 公路 ) 考察 只 有 彼此 相距 工 的 一 个 入 口 和 一 个 出 口 的 
单车 道 公路 (参见 图 5.2). 假定 车 辆 按 速 率 为 和 的 泊 松 过 程 驶 入 , 且 每 辆 车 的 行驶 速 
度 为 随机 变量 V, 它 满足 如 下 的 附加 条 件 : 只 要 行驶 的 车 辆 遇 上 较 慢 的 车 辆 就 必须 
减 慢 到 较 慢 行驶 的 车 辆 的 速度 . 以 Vi 记 第 i 辆 车 进入 公路 的 速度 值 , 假设 Vi(i > 1) 
是 独立 同 分 布 的 , 且 独 立 于 进入 公路 的 车 辆 的 计数 过 程 . 假设 时 刻 0 在 公路 上 没有 
车 . 我 们 将 确定 

a b 
5.2 车 在 a 点 进入 , 而 在 b 点 离开 
(a) 时 刻 t 公路 上 的 车 辆 数 R(t) 的 概率 质量 分 布 . 
(b) 时 刻 y 进入 公路 的 一 辆 车 在 路 上 行驶 时 间 的 分 布 . 
解 ” (a) 以 T=L/Vi 记 在 公路 上 没有 其 他 车 , 第 i 辆 车 到 达 时 在 路 上 行驶 的 时 间 . 
用 Ti; 表示 第 i 辆 车 的 自由 行驶 时 间 , 注意 ,7T2,… 是 独立 的 , 且 具 有 分 布 函 数 
G(xz) = PT < zx) = P(L/Vi < 7) = P(Vi > L/z) 

每 当 一 辆 车 进入 公路 , 我 们 就 说 发 生 了 一 个 事件 . 再 设 t 是 固定 值 , 若 s < t 且 在 时 
刻 s 进入 公路 的 车 的 自由 行驶 时 间 超 过 t 一 s, 则 称 在 时 刻 s 发 生 了 一 个 类 型 1 事 
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件 . 换 句 话说 , 即使 在 一 辆 车 进入 时 , 路 上 没有 车 , 在 时 刻 t 还 在 路 上 的 车 的 进入 是 
一 个 类 型 1 事件 . 注意 , 独立 于 s 以 前 发 生 的 一 切 事件 , 在 时 刻 s 发 生 的 事件 是 类 


型 1 的 概率 为 ES 


0, 若 s>t 
将 在 时 刻 y 前 发 生 的 类 型 1 事件 数 记 为 Ni(y), 于 是 对 y < t 由 命题 5.4 推出, Ni(y) 
是 一 个 均值 为 


Pl(s)= 


BNW =2| G(sds, vy<t 
0 
的 泊 松 随机 变量 因为 当 且 仅 当 Ni(t) = 0 时 , 公路 上 在 时 刻 没有 车 , 由 此 推出 
P{R(t) =0} =P{Ni(t) =0} = oh ota > oh Sa 
为 了 对 n> 0 确定 P{R(t) = 可 ,我 们 将 对 首 个 类 型 1 事件 的 发 生 时 刻 (或 者 在 没 
有 类 型 1 事件 时 为 co) 取 条 件 . 以 X 记 首 个 类 型 1 事件 发 生 的 时 刻 , 可 由 
XS<yN(y) >0 

得 到 其 分 布 函数 为 

Fx(W) =P{X <y} =P{N(Y) >0} =1-e 
求 微 商 , 就 得 出 X 的 密度 函数 


jxO=AXGL-ye 


y 
= ay js 


入 | Gs)a. 
上 Ca ek 


再 用 等 式 
P{R(D) =n} = [Pt =n|X = 切 fx(o)dy (5.19) 


并 注意 如 果 X = y < t, 那么 时 刻 y 进入 公路 的 首 辆 车 在 时 刻 t 还 在 路 上 , 因为 在 
y 和 上 之 间 到 达 的 所 有 其 他 的 车 在 时 刻 t 也 在 路 上 , 由 此 推出 条 件 X = y 下 , 在 时 
刻 t 在 路 上 的 车 和 1 加 上 均值 为 A(t 一 vy) 的 泊 松 随机 变 甚 有 相同 的 分 布 所 以 , 对 
n>0 有 
@—XMt—y) Q(t))" 
P{R(t) =nlX =Y} = { CDn 
1 i 让 
将 此 式 代 入 方程 (5.19) 得 出 
P{R() =n} = | eX-y) el a 


(b) 将 在 时 刻 y 进入 公路 的 车 自由 行驶 时 间 记 为 工 , 而 以 A(y) 表示 其 实际 行 
驶 时 间 . 为 了 确定 P{A(y) < z}, 我 们 令 t= z+y, 注意 当 且 仅 当 了 < z, 且 在 时 刻 
y 前 没有 类 型 1 事件 (利用 + = z+y) 时 , A(y) 小 于 z. 这 就 是 
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4(0) <z 今 IT<z,NiG)=0 

因为 了 独立 于 早 于 时 刻 y 发 生 的 事件 , 由 上 式 就 推出 了 
P{A(y) < z}=P{T < z}P{N(y) =0} 
本 come 下 Go+z-sjds 
-Glen | su a 
例 5.20 (追踪 HIV 感染 的 人 数 ) 一 个 人 从 感染 艾滋 病 HIV 病毒 的 时 间 , 到 艾滋 
病症 状 的 出 现 , 有 相对 长 的 潜伏 期 . 其 结果 是 , 对 于 负责 公众 健康 的 部 门 来 说 , 在 任 
意 给 定 的 时 间 确定 总 体 中 受到 感染 的 人 数 很 困难 . 我 们 现在 介绍 描述 这 个 现象 的 一 

个 初级 的 近似 模型 , 用 它 可 以 得 到 感染 人 数 的 粗略 估计 . 

我 们 假设 个 体 按 未 知 速率 ^ 的 泊 松 过 程 感染 HIV 病毒 . 假设 从 个 体感 染 直到 
出 现 疾病 的 症状 的 时 间 是 有 已 知 分 布 G 的 随机 变量 . 再 假设 不 同 的 感染 个 体 的 潜 
伏 期 是 独立 的 . 

以 Nilt) 记 直到 时 刻 t 为 止 显现 疾病 症状 的 人 数 . 同样 , 以 N2(t) 记 直到 时 刻 上 
为 止 HIV 为 阳性 , 但 是 还 没有 显现 任何 疾病 症状 的 人 数 . 现在 , 由 于 在 时 刻 s 受到 
病毒 感染 的 个 体 以 概率 G(t 一 s) 在 时 刻 t 出 现 症状 , 而 以 概率 G(t 一 s) 在 时 刻 t 不 
出 现 症状 , 由 此 从 命题 5.4 推出 , Ni(t) 与 Nz(t) 是 独立 的 泊 松 随机 变 基 , 分 别 有 均 
值 t t 
E[N(t)] = | Gl(lt— s)ds= | Gl(y)dy 

0 0 


要 
E[N2(t)] = 站 G(t—s)ds = 和 | G(y)dy 


现在 , 如 果 我 们 知道 , 那么 我 们 可 以 通过 均值 E[N2(t)] 估计 受到 感染 但 是 在 时 间 
t 没有 任何 外 部 症状 的 人 数 N2(t). 可 是 , 由 于 和 未 知 , 必须 首先 估计 它 . 我 们 现在 
知道 Ni(t) 的 值 , 从 而 可 以 用 此 已 知 值 作为 其 均值 ELNa(b] 的 估计 . 即 如 果 直 到 时 
间 + 上 为止 呈 现 症状 的 人 数 是 ni, 那么 我 们 可 以 估计 


t 
mEN(t) = | G(y)dy 

0 

所 以 , 我 们 可 以 用 由 | i 
=m/| eWay 
给 出 的 最 来 估计 .利用 和 的 这 个 估计 , 我 们 可 以 用 
i m | Gay 
Na() 的 信 计 = 和 | Bl)dy = 一 一 一 
| eway 
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估计 受到 感染 但 是 在 时 间 上 没有 症状 的 人 数 . 例如 , 假设 G 是 均值 为 上 的 指数 分 
布 . 那么 G(y) =e-Y/*, 求 一 次 简单 的 积分 给 出 
i Tan 一 em 

Naz(b 的 估计 = tp em) 
如 果 我 们 假设 t= 16 年 ,六 = 10 年 , 而 ni = 22 万 , 那么 受到 感染 但 是 在 16 年 还 没 
有 症状 的 人 数 的 估计 值 是 
220(1 一 e-16) 
估计 = 16—10(1—e-16) 
即 如 果 我 们 假设 上 面 的 模型 近似 地 正确 (而 我 们 必须 清醒 地 认识 到 不 随时 间 改 变 的 
常数 感染 率 的 假定 是 这 个 模型 的 弱点 ), 那么 若 潜伏 期 是 均值 为 10 年 的 指数 随机 变 
基 , 并 且 若 在 传染 的 前 16 年 呈现 艾滋 病症 状 的 人 数 为 22 万 , 则 我 们 可 以 近似 地 估 
计 有 21.9 万 人 是 HIV 阳性 , 虽然 在 16 年 没有 症状 . nm 
命题 5.4 的 证 明 ”我 们 计算 联合 概率 P{Ni(t) = nmi,i = 1,…,}. 为 此 首先 注意 ， 
为 了 有 ni 个 类 型 i 事件 (i = 1,…,), 必须 总 共有 并 ini 个 事件 . 因此 , 取 条 件 
于 N(t) 导出 


P{Ni(t) =ma Nett) = ng} 
大 大 
=P {mo =n1,..., Ni(t) =nx|N() 这 >") xP {xo = >") 
i=l i=1 


现在 考虑 发 生 在 区 间 [0,4] 中 的 一 个 任意 的 事件 . 如 果 它 已 经 在 时 间 s 发 生 , 那么 它 
是 类 型 i 事件 的 概率 将 是 P(s). 因此 , 由 于 由 定理 5.2, 这 个 事件 将 发 生 在 某 个 时 
间 , 该 时 间 在 [0,4 均匀 分 布 , 由 此 推出 这 个 事件 是 类 型 i 事件 的 概率 为 


和 
R=+| Pods 
t Jo 


= 21.896 (万 ). 


并 独立 于 其 他 事件 . 因此 ， 
大 
Bb {x0 一 mi 一 1 对 NG 忆 2 
i=1 


正好 等 于 ni(i = 1,…,) 个 类 型 i 的 结果 的 多 项 分 布 , 其 中 并 4 im 个 独立 试验 中 
每 一 个 的 结果 以 概率 已 是 i(i = 1,…, 信 ). 即 
大 wR 
P {m0 =m Ne(t) = nk|N() = "| 一 (Cor Pr 
i=1 


nl 


从 而 
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2 CD 
P{NaGb) = mm Ni(t) = nk} = [Cn pr ig a 
大 
=J]e QtP)™ /ml 
i=1 
证 明 就 完成 了 . 四 


现在 我 们 再 举 一 些 体现 定理 5.2 用 途 的 例子 . 
例 5.21 ”保险 理赔 按 一 个 速率 为 的 泊 松 过 程 分 布 的 时 间 处 理 , 相继 的 理赔 金额 
是 独立 的 随机 变量 , 具有 均值 为 上 的 分 布 G, 而 且 独 立 于 到 达 时 间 . 以 5S; 和 Ci 分 
别 记 第 i 次 理赔 的 时 间 和 金额 . 到 时 间 t 处 理 的 所 有 理赔 要 求 的 全 部 折扣 价值 , 记 
为 D(t), 定义 为 


N(t) 
D(t) = De °C 
i=] 


其 中 a 是 折扣 率 , 而 N(t) 是 直到 时 间 + 为止 的 理赔 次 数 . 为 了 确定 D(t) 的 期 望 值 ， 
我 们 取 条 件 于 N(t) 以 得 到 


BlIpOl= DO EIDOINGO) = ee 
n=0 


现在 , 取 条 件 于 N(t) = m 因为 理赔 到 达 时 间 51,…, Sn 与 个 独立 均匀 (0,t) 随 
机 变 基 矶 ,…, Un 的 次 序 值 U0),…, Un) 有 相同 的 分 布 . 所 以 ， 


n 


= DElcie 0] = DS BlCJBle-eve) 


i=1 


EID(DIN(D =n] =E 区 CieraeUo 
i=1 


其 中 最 后 的 等 式 用 了 理赔 金额 与 它们 的 到 达 时 间 的 独立 性 . 因为 EICi] = ,继续 上 
述 推理 给 出 


EID(UDING =n] = 1 Ele tm] = pE De | = /也 | 
i=1 i=] 1 


最 后 的 等 式 是 因为 U1),…, Un) 是 态 ,…, Un 按 递增 次 序 的 值 , 所 以 并 记 :e-"co = 
i1e “0. 继续 这 组 等 式 导出 


4 
EID(IN() = 可 = npElerew]= | er-srdz=m 攻 (1 -erob 
上 Jo at 


所 以 训 
EID(OINO] = NO —e™) 


取 期 望 导出 结果 
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EID(] = 举 (1 —e-ot) 日 


例 5.22 (一 个 优化 例子 ) 假设 部 件 按 速率 为 和 的 泊 松 过 程 到 达 一 个 处 理 车 间 . 在 
固定 的 时 间 T, 所 有 的 部 件 都 被 分 发 出 系统 . 问题 是 在 (0,T) 中 选取 一 个 系统 中 所 
有 部 件 都 被 分 发 的 中 间 时 间 t, 使 所 有 部 件 的 等 待 时 间 的 总 期 望 最 小 . 
如 果 我 们 在 时 间 t(0 < t < T) 分 发 , 那么 所 有 部 件 等 待 时间 的 总 期 望 是 

At2 AT-t)? 

i 
为 了 理解 为 什么 这 是 对 的 , 我 们 论证 如 下 : 在 (0,t) 上 到 达 的 部 件数 的 期 望 是 Xt, 并 
且 每 一 个 到 达 是 在 (0, 上 均匀 地 分 布 的 , 因此 有 期 望 等 待 时 间 t/2. 于 是 , 在 (0,t) 
上 到 达 的 部 件 的 等 待 时 间 的 总 期 望 是 Xt2z/2. 类 似 的 推理 对 于 在 (t,T) 上 到 达 的 部 
件 也 成 立 , 而 随 之 有 上 面 的 结果 . 为 了 使 这 个 基 达 到 最 小 , 我 们 对 t 求 微 商 得 到 


d [如 (人 -tj 
+ |=X -XT 


而 令 它 等 于 0 显示 等 待 时 间 的 总 期 望 最 小 的 分 配 时 间 是 t= T/2. 出 

我 们 用 一 个 非常 类 似 于 定理 5.2 的 结果 结束 这 一 节 , 它 说 明 给 定 第 个 事件 的 
时 间 Su 前 n 一 1 个 事件 的 时 间 与 均匀 地 分 布 在 (0, Sn) 上 的 一 组 n 一 1 个 随机 变 
其 的 次 序 值 有 相同 的 分 布 . 
命题 5.5 给 定 Sn = 集合 51,…,Sn-1 与 一 组 n 一 1 个 独立 的 (0,t) 均匀 随机 变 
量 有 相同 的 分 布 . 
证 明 我们 可 以 用 论证 定理 5.2 的 方法 证 明 上 述 结果 , 或 者 可 以 如 下 论证 : 

S1,**, Sn-ilSn =t~ SI Sn-ilSn =t, N(t*)=n—1 
~ S51,Sn-ilN(t")=n—1 

其 中 记号 ~ 表示 “与 …… 有 一 样 的 分 布 ", 而 二 差 一 个 无 穷 小 地 小 于 t. 现在 结 
果 得 自 定理 5.2. 国 


5.3.6 ”软件 可 靠 性 的 估计 


开发 出 新 的 计算 机 软件 包 后 , 常常 要 执行 一 个 测试 程序 以 消除 该 软件 包 中 的 缺 
陷 与 故障 . 一 个 常见 的 测试 方法 是 , 用 一 系列 熟知 的 问题 来 试验 这 个 软件 包 看 它 是 
否 产生 错误 的 结果 . 在 这 样 的 测试 进行 了 某 个 固定 的 时 间 后 , 将 所 有 产生 的 错误 记 
下 . 然后 停止 测试 , 并 且 仔细 地 检查 这 个 软件 包 以 确定 引起 这 些 错误 的 具体 故障 . 然 
后 改动 这 个 软件 包 , 排除 这 些 故障 . 因为 我 们 不 能 肯定 在 软件 包 中 所 有 的 故障 已 经 
被 排除 , 最 重要 的 问题 是 估计 这 个 修改 了 的 软件 包 的 错误 率 . 

为 了 给 上 述 问 题 建立 模型 , 我 们 假设 开始 时 这 个 软件 包 包 含 m 个 故障 , m 是 未 
知 数 , 记 为 故障 1, 故障 2, …, 故障 m. 再 假设 故障 i 按 一 个 未 知 速率 Xi 的 泊 松 过 
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程 引起 错误 发 生 , i = 1,…,m. 于 是 , 例如 , 在 任意 s 个 时 间 单 位 的 运行 时 间 中 由 故 
障 i 引发 的 错误 个 数 是 均值 为 和 is 的 泊 松 分 布 . 再 假设 由 故障 iti = 1,…,m) 引起 
的 泊 松 过 程 是 独立 的 . 此 外 , 假设 这 个 软件 包 将 运行 上 个 时 间 单位 , 并 且 将 所 有 产生 
的 错误 记 下 . 在 这 个 时 间 末 , 对 此 软件 包 作 仔细 的 检查 , 以 确定 引起 错误 的 特定 故障 
( 即 进行 调试 ). 排除 这 些 故障 , 而 后 的 问题 是 确定 这 个 修改 了 的 软件 包 的 错误 率 . 
如 果 我 们 令 
A 
0， 其 他 情形 
我 们 希望 估计 的 基 是 最 后 的 软件 包 的 错误 率 


Alt) = 2 Nwbilt) 
首先 注意 
E[A(W)] = DO NEWi(t)] = 》 Xier Mt (5.20) 


现在 发 现 的 每 一 个 故障 将 引发 一 定 个 数 的 错误 . 我 们 以 Mj(t) 记 引 发 7 个 错误 的 故 
障 的 个 数 , 7 > 1. 即 Mi(t) 是 恰好 引发 一 个 错误 的 故障 的 个 数 , M2(t) 是 引发 两 个 错 
误 的 故障 的 个 数 , 如 此 等 等 ,而 沁 ; jM(t) 等 于 产生 的 错误 总 数 . 为 了 计算 E[Ma(b]， 
我 们 定义 示 性 变 基 (t)(i > 1) 为 


(0) = 1， 故障 站 恰好 引发 一 个 错误 
0， 其 他 情形 
Mi(lt) = DTi(t) 


从 而 
EIMi(t)] = 》 ELG(GD] = D Nte—™t (5.21) 


于 是 , 由 方程 (5.20) 和 方程 (5.21) 我 们 得 到 结果 
Mi(t)] _ 
E [0 = 2 =0 (5.22) 


于 是 建议 用 Mi(t)/t 作为 A(t) 的 一 个 估计 . 为 了 确定 Mi(t)/t 是 否 构成 了 A(t) 的 
一 个 好 的 估计 , 我 们 将 看 这 两 个 量 相差 多 少 . 即 我 们 计算 


| (0 一 29) ] = Var (A@ 一 9) 由 (5.22) 


= Var(A(t)) — FCov(Al), Mi(t) + 二 Var(Ma(D) 
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现在 
Var(A(D) = 六 ARVar(wi(D) = 》 Met(1 一 ex9， 
Var(Mi(t)) = pS Var(Ii(t)) = Tiel — Nte—™t), 
Cov(A(t), M1()) = Co (Drilo), > 50) 
5c),50) 
= 7 ot Ti(t)) 
= -区 和 ie-XtNite 一 At 


其 中 最 后 的 等 式 的 得 到 是 由 于 当 i 头 j 时, 因为 w(t) 和 万 (6 涉及 不 同 的 泊 松 过 程 ， 
故而 是 独立 的 , 并 且 wi(t)1;(t) = 0. 因此 我 们 得 到 


MN ep! xt EIMi(t) + 2M2(t)] 
5| (0- 2) |=E* 和 ti 入 人 


其 中 最 后 的 等 式 得 自 (5.21) 和 恒等式 (我 们 将 它 留 作 一 个 习题 ) 


ELMG(O] 一 于 并 (NbDzery 


于 是 我 们 可 以 用 观察 值 Mi(t) +2M2(t) 除 以 妇 来 估计 A(b 和 Mi(t)/t 间 的 平 
均 平方 差 . 
例 5.23 ”假设 在 100 个 单位 运行 时 间 中 , 发 现 了 20 个 故障 , 其 中 2 个 恰好 引发 一 
个 错误 , 3 个 恰好 引发 两 个 错误 . 那么 , 我 们 用 类 似 于 均值 为 1/50, 方差 为 8/10 000 
的 一 个 随机 变量 的 值 估计 A(100). 国 


1 


5.4 ” 泊 松 过 程 的 推广 
5.4.1 ， 非 时 齐 泊 松 过 程 

这 一 节 考 虑 泊 松 过 程 的 两 种 推广 其 中 第 一 种 是 非 时 齐 的 , 也 称 为 非 平稳 的 泊 
松 过 程 , 它 由 容许 在 时 间 t 的 到 达 速率 是 t 的 一 个 函数 得 到 . 


定义 5.3 ”计数 过 程 {N(t),t > 0} 称 为 强度 函数 为 和 (i)(t > 0) 的 非 时 齐 泊 松 过 程 ， 
如 果 
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G) N(0) = 0. 
(i {N(t),t > 0} 有 独立 增 量 . 

(iii) P{N(t + h) — N(t) > 2} = o(h). 

(iv) P{N(t+h) — N(t) = 1} = MWh + o(h). 


mW = | Mo 


定义 的 函数 m(t) 称 为 非 时 齐 泊 松 过 程 的 均值 函数 , 其 理由 表述 在 以 下 的 重要 定理 
之 中 . 
定理 5.3 若 {N(t),t > 0} 是 强度 函数 为 A(t)(t >.0) 的 非 时 齐 泊 松 过 程 ， 则 
{NN(t 二 8) 一 N(s),t > 0} 是 均值 为 mlt 二 8) 一 m(s) = | A(y)dy 的 泊 松 随机 变量 . 
证 明 ”我 们 先 仿照 平稳 泊 松 过 程 的 定理 5.1 证 明 Ntt) 是 均值 为 m(t) 的 泊 松 随机 
变量 令 g(t) = Ele-*No], 沿 着 证 明 的 确切 步 又 得 到 方程 
g(t+h) = g(t)Ele™*N()] 
其 中 Ni(h) = Nt+ 六 一 N(D). 利用 P{Ni(A) = 0} = 1 一 和 (Dh +o(h), 我 们 取 条 件 
于 Ni(h) 是 否 是 0, 1, 或 >2, 由 公理 (ii) 和 (iv) 得 到 
g(t+h) = g(t)(1 一 A(Dh + e-*A(Dh + olh)) 
因此 
g(t+h) — g(t) = g(t) XA)(e* — Dh + oh) 
除 以 后 令 h 一 0 推出 微分 方程 
g(t) = g(O XW)(e™* —1) 


它 可 写成 th) 
$y = Me 


两 边 从 0 到 + 求 积分 就 得 出 


In(g(t)) — In(g(0)) = (e— — | XWdt 


t 
利用 g(0) = 1 和 | Mbdt = mt 由 上 式 得 出 
g(t) =expfmtbler* — 1)} 


于 是 N(t) 的 拉 普 拉 斯 变换 Ele-*N] 是 em(9(e“-D). 因为 后 者 是 均值 为 m(b 的 泊 
松 随机 变量 的 拉 普 拉 斯 变换 , 所 以 N(t) 是 均值 为 m(t) 的 泊 松 随机 变量 . 记 Ns(t) = 
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NN(s+t) 一 NN(s), 现在 命题 得 自 ,注意 到 计数 过 程 {Ns(b,t > 0} 是 强度 函数 为 和 s(t) = 
入 (s 十 t),t > 0 的 非 时 齐 的 泊 松 过 程 . 因此 Ns(t) 是 具有 均值 


[ sy)ay = [ Xs+ Yay = 上 Atazjdz 


的 泊 松 随机 变量 . 这 就 证 明了 结论 .， 四 
注 N(s+ 台 一 N(s) 具有 均值 | 。 Ab)dy 的 治 检 分布, 这 是 伯 努 利 随机 变量 ( 参 
见 例 2.47) 独立 和 的 治 松 极限 的 一 个 推论 . 为 了 理解 这 点 ， 我 们 将 区 间 [ss 十 引 划 分 
为 长 度 的 nn 个 子 区 间 ， 其 中 于 区间 从 s+(i 一 了 到 s+ 证 ,i 二 1,…n. 令 
Ni (+) -N (e+G- Dt) 记 在 子 区 间 i 中 发 生 的 事件 数 , 并且 注意 到 
P { 存 在 藉 个 子 区 同 中 的 事件 数 > 2}= P( Ni >2)) 
渤 Pt >2} -oo 人 (上 ) 由 公理 (者 ) 


因为 
lim no(t/n) = Jim, :4 - 


由 此 推出 ， Me 个 中 有 两 个 或 以 上 的 机率 趋 于 
0. 随 之 , 以 概率 趋 于 1 地 有 , N() 等 于 其 中 有 一 个 事件 发 生 的 子 区 间 的 个 数 , 因为 
一 个 李 件 在 子 区 同 宇 中 的 概率 是 (*+ 认 ) 二 +o 人 ) 而 且 在 不 同 子 区 间 的 事件 
个 数 是 独立 的 , 由 此 推出 , 当 nn 大 时 会 有 一 个 事件 的 子 区 间 的 个 数 近 似 地 是 一 个 以 
ba (+) E+ no(t/n) 
为 均值 的 治 松 随机 变量 . 但 是 
n stt 
lim, >» (: + | + no(t/n) = [ Ay)dy 


0 


从 而 得 到 结果 ， 四 
一 个 通常 的 泊 松 过 程 的 时 间 抽样 生成 一 个 非 时 齐 的 泊 松 过 程 .就 是 说 , 若 {N(), 
+ > 0} 是 一 个 速率 为 的 泊 松 过 程 , 并 且 假设 在 时 间 t 发 生 的 一 个 事件 , 以 独立 于 
旱 于 + 发 生 的 事件 的 概率 p(t) 计数 ， 以 Ne(t) 记 直到 时 间 t 为 止 被 计数 的 事件 个 
数 , 计数 过 程 {Ne(b),t > 0} 是 一 个 强度 为 Mt) = Xp(t) 的 非 时 齐 的 泊 松 过 程 . 这 可 
由 {Ne(),t > 0} 满足 非 时 齐 的 泊 松 过 程 的 公理 验证 . 
1. Ne(0) = 
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2. 在 (s,s 十 t) 中 被 计数 的 事件 的 个 数 只 依赖 这 个 泊 松 过 程 在 (s,s +t) 中 发 生 
的 事件 个 数 , 它 独立 于 早 于 s 发 生 的 事件 . 因此 , 在 (s,s 十 中 被 计数 的 事件 的 个 
数 独立 于 早 于 s 的 被 计数 的 事件 , 从 而 建立 了 独立 增 基 性 质 . 

3. 与 N(t,t+h) 类 似 地 定义 , 令 Ne(t,t+h) = Ne(t+h) 一 Ne(t) 


P{N(t,t+h) >2} < P{N(t,t+h) > 2} = o(h} 
4. 为 了 计算 P{Ne(tt+ 站) = 1}, 取 条 件 于 N(t,t+h) 


P{Ne(t,t+h) =1} 
=P{Ne(t,t+h)=1IN(t,t+h)=1}P{N(t,t+h) =1} 
+P{Ne(t,t+h) = 1|N(t,t+h) > 2}P{N(t,t+h) > 2} 
=P{Ne(t,t+h)=1|N(t,t+h)= 1}M+o(h) 
=p(t)Mh + o(h) 


非 时 齐 的 泊 松 过 程 的 重要 性 在 于 我 们 不 再 需要 平稳 增 基 这 个 条 件 . 于 是 , 现在 
我 们 认为 事件 可 以 在 某 些 时 间 比 在 其 他 时 间 更 可 能 发 生 . 
例 5.24 ”西伯 经 营 了 一 家 热狗 售 货 亭 , 上 午 8 点 开始 营业 . 从 上 午 8 点 到 上 午 11 
点 , 基本 上 有 一 个 稳定 增长 的 顾客 平均 到 达 率 , 在 8 点 以 每 小 时 5 个 顾客 的 速率 开 
始 , 而 在 11 点 达到 每 小 时 20 个 顾客 的 最 大 值 . 从 上 午 11 点 到 下 午 1 点 (平均 ) 到 
达 率 基本 上 保持 常数 , 即 每 小 时 20 个 顾客 . (平均 ) 到 达 率 从 下 午 1 点 直到 下 午 5 点 
关门 稳定 地 下 降 , 这 时 的 值 是 每 小 时 12 个 顾客 . 如 果 假 定 到 达 西伯 售 货 亭 的 顾客 数 
在 不 相交 的 时 间 段 是 独立 的 , 那么 上 述 问题 的 一 个 好 的 概率 模型 是 什么 ? 在 星期 一 
上 午 8:30 到 上 午 9:30 没有 顾客 的 概率 是 多 少 ? 在 这 个 时 间 段 中 的 平均 到 达 人 数 是 


多 少 ? 
解 ”上 面 的 一 个 好 的 模型 是 假定 到 达 构 成 一 个 非 时 齐 的 泊 松 过 程 , 其 强度 函数 A(t) 
由 
5 十 5t， 0gt<3 
X(t) = 20， 3<t 和 5 
20—2(t—5), 5<ti<9 
和 


A(t) = At 一 9)， 对 于 t>9 


给 出 . 注意 N(t) 表示 在 商 亭 开 门 后 的 前 上 个 小 时 中 到 达 的 人 数 . 即 我 们 不 计 下 午 5 
点 到 上 午 8 点 的 时 间 . 如 果 由 于 某 种 原因 不 管 商 亭 是 否 开门 , 我 们 需要 N(t) 表示 
前 上 个 小 时 中 到 达 的 人 数 , 那么 假定 这 个 过 程 开 始 于 午夜 零 时 , 令 
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0, 0<t<8 
5+5(t—8), 8<t<1l 
Xt) = 0 20, 1l1<t<13 
20—2(t—13),，13<t<17 
0, 17<t<24 


A(t) = At 一 24)， 对 于 上 +> 24 


因为 在 上 午 8:30 到 上 午 9:30 之 间 到 达 的 人 数 在 第 一 种 表示 中 是 均值 为 m(3/2) 一 
m(1/2)( 在 第 二 种 表示 中 是 均值 为 m(19/2) - m(17/2)) 的 泊 松 随机 变 基 , 所 以 这 个 
数 是 0 的 概率 是 


3/2 
ep{ 一 | (5 十 syat} 一 er-10 ~ 0.000045 
1/2 


而 平均 到 达 人 数 是 , 
3/2 
| (5+5t)dt = 10 国 
1/2 


如 果 假 设 事件 按 速率 为 和 的 泊 松 过 程 发 生 , 并 且 假 设 独立 于 过 程 以 前 发 生 的 
事件 , 一 个 事件 在 时 间 s 以 概率 P(s) 是 类 型 1 事件 , 而 以 概率 忆 (s) = 1 一 已 (s) 
是 类 型 2 事件 . 如 果 以 {Ni(t),t > 0} 记 直 到 时 间 t 为 止 类 型 事件 发 生 的 个 数 ， 
那么 容易 由 定义 5.3 推出 , {Ni(t),t > 0} 和 {NN2(t),t > 0} 是 分 别 具 有 强度 函数 
和 i(t) = APG = 1,2) 的 相互 独立 的 非 时 齐 泊 松 过 程 (证 明 仿 照 命题 5.3). 这 个 结 
果 给 了 我 们 另 一 个 途经 来 了 解 (或 者 证 明 ) 命题 5.3 的 时 间 抽样 的 泊 松 过 程 的 结果 ， 
它 说 明 Ni(t) 和 N2(t) 是 具有 均值 ELNi(b] = 和 | aast = 1,2) 的 独立 泊 松 随机 
变量 . 

例 5.25 (有 无 穷 条 服务 线 的 泊 松 队列 的 输出 过 程 ) M/G/oo 排队 系统 ( 即 无 穷 条 
服务 线 , 是 具有 泊 松 到 达 及 一 般 的 服务 (时 间 ) 分 布 G 的 排队 系统 ) 的 输出 过 程 是 
具有 强度 函数 Xt) = AG(t) 的 非 时 齐 泊 松 过 程 . 为 了 验证 这 个 断言 , 我 们 首先 论证 
离开 过 程 具有 独立 增 其 . 我 们 考察 不 相交 区 间 O1,… ,Ok, 直至 结束 . 现在 称 一 个 
到 达 是 类 型 i 的 (i = 1,…,k), 如 果 到 达 在 区 间 O; 中 离开 .由 命题 5.4 推出 , 在 
这 些 区 间 中 离开 的 个 数 是 彼此 独立 的 , 这 就 建立 了 独立 增 基 性 . 现在 , 假设 一 个 到 达 
在 t 与 t+h 之 间 离 开 就 被 计数 . 因为 在 时 间 s(s < t+ jh 的 一 个 到 达 被 计数 的 概 

Gl(t+h—s)-G(t-s) 若 s<t 

EY ete 若 t<s <t 十 六， 由 此 从 命题 5.4 推出 , 在 
(t,t 十 h) 中 离开 的 个 数 是 泊 松 随机 变量 , 具有 均值 
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t+h t+h t 
| P(s)ds= | Glt+h—s)ds— | Glt— s)ds 
0 0 0 


了 联 Glyay A | Glway 


3 5 


= car | 
= AG(t)h + o(h) 
所 以 ， 
P{ 在 (t,t 十 h) 中 有 1 个 离开 } = 和 G(t)he-*SG(Oh +o(h) = AG(t)h +o(h) 


而 且 
P{ 在 (t,t 十 hh) 中 离开 个 数 > 2} = o(h) 


这 就 完成 了 验证 . 图 
如 果 我 们 以 Sn 记 这 个 非 时 齐 的 泊 松 过 程 的 第 n 个 事件 的 时 间 , 那么 我 们 可 以 
得 到 它 的 密度 如 下 : 
P{t< Sn <t+h}=P{N(t)=n 一 1, 在 (bt+hi 中 有 一 个 事件 } + o(h) 
二 P{N(t) =n 一 1}P{ 在 (t,t 十 加 中 有 一 个 事件 } + o(h) 
en + o(h)] + o(h) 
= Mb)e-mO 2 h+ olh) 
它 列 涵 了 
及 四 = Xe "OO 
其 中 
加 全 -| Xejds 
0 


5.4.2 复合 泊 松 过 程 
一 个 随机 过 程 {X(t),t > 0} 称 为 复合 泊 松 过 程 , 如 果 它 可 以 表示 为 


N(t) 
XO)= DY% t20 (5.23) 
i=1 


其 中 {N(t),t > 0} 是 一 个 泊 松 过 程 , 而 {Yi,i > 1} 是 独立 于 {N(t),t > 0} 的 一 组 独 
立 同 分 布 的 随机 变 基 . 正如 在 第 3 章 中 所 示 , 随机 变量 X(t) 称 为 复合 泊 松 随机 变 
量 . 
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复合 泊 松 过 程 的 例子 

人 车 玫 =1 则 和 (DO = NN(t), 从 而 我 们 得 到 普通 的 泊 松 过 程 . 

人 假设 公共 汽车 按 泊 松 过 程 到 达 一 个 体育 赛事 场地 , 并 且 假 定 在 每 辆 公共 汽 
车 中 的 体育 爱好 者 人 数 是 独立 同 分 布 的 . 那么 {X(b,t > 0} 是 复合 泊 松 过 程 , 其 中 
X(t) 记 直 到 时 间 t 为止 到 达 的 体育 爱好 者 的 人 数 . 在 方程 (5.23) 中 , 到 表示 在 第 i 
辆 公共 汽车 中 体育 爱好 者 的 人 数 . 

( 阁 ) 假设 顾客 按 泊 松 过 程 离开 某 个 超市 . 如 果 第 i 个 顾客 花费 的 金额 Yi(i = 
1,2,…) 是 独立 同 分 布 的， 那么 当 X(t) 表示 在 时 间 t 之 前 花费 的 总 金额 时 ， 
{X(b,t>0} 是 复合 泊 松 过 程 . 

因为 X(b 是 一 个 以 Xt 为 泊 松 参数 的 复合 泊 松 随机 变量 , 由 例 3.10 和 例 3.19， 
我 们 有 

E[X(t)] = ME[Y] (5.24) 
Var(X(t)) = ME[Y?] (5.25) 
例 5.26 ”假设 家 庭 以 每 星期 和 = 2 的 泊 松 速率 移民 到 一 个 地 区 . 如 果 每 个 家 庭 的 
人 数 是 独立 的 , 而 且 分 别 以 概率 +,1, 1, 1 


6'3’3 6 到 值 1 2,3,4, 那么 在 固定 的 5 个 星期 中 
移民 到 这 个 地 区 的 人 数 的 期 望 值 与 方差 是 多 少 ? 
解 ” 以 3 记 第 i 个 家 庭 的 人 数 , 我 们 有 
ElY] =1x3+2x3+3x3+4xB= 也 
E[Y2] = 1xBt2 B+ x3+t 42 x3= 多 
因此 , 以 X(5) 记 在 5 不 同 央 市 基 项 到 这 不 时区 的 人 天 从 方程 (5.24) 和 方程 (5.25)， 
我 们 得 到 
EIX(5)] =2x5x 3 =25 
VarlX( 四 =2x5x 针 = 于 图 
例 5.27 ( 单 服务 员 的 泊 松 到 达 队 列 的 忙 期 ) 考察 一 个 单 服务 员 的 服务 站 , 顾客 按 速 
率 为 入 的 泊 松 过 程 到 达 . 如 果 在 顾客 到 达 时 服务 员 空 着 就 立刻 接受 服务 , 不 然 顾客 
就 排队 等 待 ( 即 他 加 入 队列 ). 相继 的 服务 时 间 是 独立 同 分 布 的 . 
这 样 的 系统 将 交替 地 处 在 (系统 中 没有 顾客 时 服务 员 闲 着 的 ) 闲 期 与 (系统 中 
有 顾客 , 服务 员 忙 着 的 ) 忙 期 . 当 一 个 到 达 者 发 现 系统 空 着 , 忙 期 就 开始 , 因为 泊 松 
到 达 的 无 记忆 性 推出 每 个 忙 期 的 长 度 有 相同 的 分 布 . 以 B 记 忙 期 的 长 度 . 我 们 来 计 
算 它 的 均值 和 方差. 
首先 , 以 5S 记 忙 期 的 首 个 顾客 的 服务 时 间 , 并 以 N(S) 记 在 这 个 时 间 中 到 达 的 
人 数 . 现在 , 若 N(5) = 0, 则 在 首 个 顾客 完成 服务 时 忙 期 结束 , 从 而 这 时 B 等 于 5. 
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现在 假设 在 首 个 顾客 的 服务 时 间 中 有 一 个 顾客 到 达 . 那么 , 在 时 刻 5 将 有 一 个 顾客 
在 系统 中 , 她 正 进入 服务 . 因为 从 时 间 5 后 的 到 达 流 仍旧 是 速率 为 和 的 泊 松 过 程 ， 
由 此 推出 从 5 直到 系统 变 空 的 附加 时 间 与 忙 期 同 分 布 . 即 若 N(S) = 1 则 
B=S+B! 

其 中 Bi 独立 于 5, 而 且 与 B 同 分 布 . 1 

现在 考虑 N(5) =n 的 一 般 情 形 , 这 时 当 服 务 员 结束 他 的 首次 服务 时 , 有 个 顾 
客 在 等 待 . 为 了 确定 忙 期 的 剩余 时 间 的 分 布 , 要 注意 到 其 中 无 论 哪个 顾客 接受 服务 
的 次 序 并 不 影响 剩余 时 间 . 因此 我 们 假设 在 初始 服务 期 间 的 ”个 到 达 者 C1,…, Cn 
按 如 下 方式 接受 服务 : C1 首先 接受 服务 , 但 是 一 直到 系统 中 只 有 顾客 C2,…, Cn 为 
止 C2 并 不 接受 服务 . 例如 , 在 C1 接受 服务 期 间 到 达 的 任何 顾客 都 在 C2 前 接受 服 
务 . 类 似 地 , 一 直到 系统 中 只 有 C3,… ,Cn 为 止 Cs 并 不 接受 服务 , 等 等 . 在 C; 和 
Ci+l 开始 服务 之 间 的 时 间 (i = 1,…,n 一 1) 和 从 Cn 开始 服务 直到 没有 顾客 进入 
系统 的 时 间 , 都 是 和 忙 期 同 分 布 的 独立 的 随机 变 基 . 

从 上 面 推出 , 如 果 我 们 令 B1, Bs,… 都 是 与 忙 期 同 分 布 的 随机 变 其 序列 , 那么 
我 们 可 以 将 B 表示 为 


N(S) 
B=S+ DB 
i 


因此 


N(S) 
ElBIS|=S+E|DS, Bils 
i=] 


而 且 
N(S) 
Var(B|S) = Var 性 ms)] 
i=1 


可 是 , 对 于 给 定 的 8, 并 ”2) Bi 是 复合 泊 松 随机 变 基 ,于 是 从 方程 (5.24) 和 方程 
(5.25) 我 们 得 到 
E[BIS] = $+ ASE[B] = (1+ AE[B])S, Var(BlS) = XSE[B3] 
因此 
EI[B] = E[E[B|S)] = (1 + ELBI)E[S] 
当 AE[S] < 1 时 这 蕴涵 
E[S] 
1—AE[S] 


E[B] = 


此 外 , 由 条 件 方 差 公式 


276 第 5 章 指数 分 布 与 泊 松 过 程 


Var(B) = Var(E[B|S]) + E[Var(B|S)] 
=(1+AE[B])2?Var(S) + AE[S]E[B3] 
= (1+ AE[B])?Var(S) + AE[S](Var(B) + E2[B]) 
导出 
Var(S)(1 + AE[B])? + AE[S]E2[B] 
1— AE[S] 
再 利用 E[B] = E[S]/(1 一 和 E[3]), 我 们 得 到 
Var(S) + AE3[S] 
(1 — ME[S])? 
当 % 的 可 能 值 的 集合 是 有 限 或 可 数 的 时 候 , 存在 复合 泊 松 过 程 的 一 个 非常 精 
美的 表达 式 . 为 此 , 我 们 假设 存在 aj(j > 1) 使 


P{Yi=@}=p;, Dn=1 
2 


Var(B) = 


Var(B) = mn 


现在 , 当 事 件 按 泊 松 过 程 发 生 且 每 个 事件 产生 一 个 随机 的 数量 Y 被 加 到 累积 和 时 ， 
就 出 现 了 一 个 复合 泊 松 过 程 . 我 们 说 事件 是 一 个 类 型 j 事件 , 如 果 它 产生 在 加 项 中 
的 数量 是 aj,7 > 1. 即 如 果 Yi = ai, 泊 松 过 程 的 第 i 个 事件 就 是 一 个 类 型 ; 事件 . 
如 果 以 Nj(t) 记 在 时 间 t 之 前 类 型 事件 的 个 数 , 那么 由 命题 5.3 推出 , 随机 变 拔 
Ni(b)( > 1) 是 独立 的 泊 松 随机 变量 , 均值 分 别 是 
EIN;(t)] = Xpit 
由 于 对 于 每 个 j, 在 时 间 t 之 前 aj 被 加 到 累积 和 上 共 Ni(t) 次 , 由 此 推出 在 时 间 t 
之 前 的 累积 和 可 以 表示 为 
X(t) = oNi(t) (5.26) 
了 


作为 方程 (5.26) 的 一 个 检验 , 我 们 用 它 计算 X(t) 的 均值 和 方差 . 由 此 导出 
E[X(t)] = 5| Som) = YayEINj(t)] = > ojMXpit= ME[Y] 

i j 了 
此 外 ， 


1 


Var[X(t)] = Var [过 Ng 
j 
三 Da3Var[Nj(t)] 由 Nj(t)(j > 1) 的 独立 性 
芝 
= > a3Mpit 
3 


= MEIY?] 


5.4 泊 松 过 程 的 推广 277 


其 中 倒数 第 二 个 等 式 是 因为 泊 松 随机 变量 Ni(t) 的 方差 等 于 它 的 均值. 

于 是 , 我 们 看 到 对 X(t) 的 均值 和 方差 , 表达 式 (5.26) 导出 如 前 推导 的 相同 表 
达 式 . 

表达 式 (5.26) 的 用 途 之 一 是 , 它 导致 结论 : 当 t 增 至 很 大 时 , X(t) 的 分 布 趋 于 
正 态 分 布 . 为 了 弄 清 其 原因 , 首先 注意 由 中 心 极限 定理 推出 , 当 泊 松 随机 变量 的 均 
值 增加 时 , 它 的 分 布 趋 于 正 态 分 布 . (为 什么 是 这 样 ?) 所 以 , 当 t 增加 时 , 随机 变量 
Nj(t) 趋 于 正 态 随机 变量 . 因为 它们 是 独立 的 , 又 因为 独立 正 态 随机 变量 的 和 也 是 
正 态 的 , 由 此 推出 当 t 增加 时 X(t) 的 分 布 也 近似 于 正 态 分 布 . 
例 5.28 ”在 例 5.26 中 , 求 接 下 来 的 50 个 星期 中 至 少 有 240 人 移民 到 该 地 区 的 近 
似 概 率 . 
解 ” 由 于 入 =2,E[Y] = 5/2,E[Y?] = 43/6, 所 以 


E[X(50)] = 250， Var[X(50)] = 4300/6 
现在 , 所 要 求 的 概率 是 


P{X(50) > 240} = P{X(50) > 239.5} 
_ p(X(50) — 250 、 239.5— 250 
VI300/6 © V4300/6 


= 1 一 理 (一 0.3922) = ®(0.3922) = 0.6525 


其 中 用 了 表 2.3 确定 标准 正 态 随机 变 基 小 于 0.3922 的 概率 下 (0.3922). 图 

另 一 个 有 用 的 结果 是 , 如 果 {X(t),t > 0} 和 {Y(b,t > 0} 是 分 别 有 泊 松 参 数 
和 和 》Xa 与 分 布 有 和 忆 的 相互 独立 的 复合 泊 松 过 程 , 那么 {X(t)+Y(t),t>0} 也 
是 复合 泊 松 过 程 . 这 是 因为 这 个 复合 过 程 的 事件 将 按 速率 为 Xi + Xa 的 泊 松 过 程 发 
生 , 而 每 个 事件 独立 地 以 概率 Xi/(Ai + Xz) 来 自 第 一 个 复合 泊 松 过 程 . 因此 , 这 个 复 
合 过 程 是 一 个 泊 松 参数 为 Xi + Xa 且 分 布 函数 开 由 


Cop ve ly H+) 


A 二 
给 定 的 复合 泊 松 过 程 
5.4.3 ”条件 (混合 ) 泊 松 过 程 


令 {N(t),t > 0} 是 一 个 计数 过 程 , 其 概率 定义 如 下 . 存在 一 个 正 随 机 变 其 工 , 在 
工 = 入 条 件 下 , 这 个 计数 过 程 是 速率 为 和 的 泊 松 过 程 . 这 样 的 计数 过 程 称 为 条 件 ( 混 
合 ) 泊 松 过 程 . 

假设 工 是 具有 密度 函数 9 的 连续 随机 变 基 . 因为 
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P{N(t+8)— N(s) =n} = 属 P{N(t+ s)— N(s) =nlL = A}gO)dX 
0 
3 Le et Qe gd (5.27) 
0 


我 们 看 到 条 件 泊 松 过 程 有 平稳 增 基 . 然而 , 因为 知道 在 一 个 区 间 中 有 多 少 事件 发 生 
给 出 了 有 关 工 的 可 能 值 的 信息 , 它 影响 任意 其 他 区 间 中 的 事件 个 数 的 分 布 , 由 此 推 
出 条 件 泊 松 过 程 一 般 不 具有 独立 增 基 . 因此 , 一 个 条 件 泊 松 过 程 一 般 不 是 泊 松 过 程 . 
例 5.29 若 9 是 参数 为 m 和 9 的 伽 马 密 度 


mm 一 1 
9g(A) = ge- 人 人 mi 入 >0 
则 
机 a -ex(OA)m 
PINO = =| ex Ge 1 
Be @-(t+OA Mntm-1dA 
乘 以 和 除 以 中 二 下 二 由 给 出 


(十 O)ntm 


tnbmn+mm 一 DLL [™ (e+0)A (t+ ON™+™! 
PNO =7} = Rm Orrm | (es 
因为 (t+ 9)e-(+9X((t 十 0) 和 A)"tm-1/(n 十 m 一 1)! 是 参数 为 (n 十 mt 十 9) 的 伽 马 随 
机 变 基 的 密度 函数 , 它 的 积分 是 1, 由 此 给 出 结果 


seo 


所 以 ,在 一 个 长 度 t 的 区 间 中 的 事件 个 数 , 它 与 当 每 次 试验 是 成 功 的 概率 为 We 
时 , 在 总 共 获 得 m 次 成 功 之 前 失败 发 生 的 次 数 有 相同 的 分 布 . 
要 计算 N(t) 的 均值 和 方差， 取 条 件 于 L. 因为 在 条 件 工 下 , N(t) 是 均值 为 Lt 
的 泊 松 过 程 ， 所 以 
EINGI = Lt, Var(N(t)|L) = 


其 中 最 后 一 个 等 式 利用 了 泊 松 随机 变 基 的 方差 等 于 它 的 均值 . 因此 , 由 条 件 方差 公 
式 导 出 
Var(N(t)) = E[Lt] + Var(Lt) = tE[L] + #2Var(L) 


我 们 可 以 计算 在 给 定 N(t) =n 时 工 的 条 件 分 布 


5.4 泊 松 过 程 的 推广 279 
P{L < z,N(t) =n} 
P{N(t) =n} 
| P{L < 7z,N(t) = 并 = 入 }9(A)dA 
P{N(t) =n} 
IB P{N(t) =n|L = A}g(NdA 
P{N(t) =n} 
[ eMt(Mt)"g(A)dA 


P{L < zIN(t) =n}= 


上 er-Xt(At)"g(A)dA 
0 


其 中 最 后 的 等 式 用 了 方程 (5.27). 换 句 话说 , 给 定 N(t) = n, 工 的 条 件 密 度 函数 是 
e-XtMXng(A) 


fiin() (Mn) = Te 
| exXtAn"g( 和 A)dA 
0 


Nd (5.28) 


例 5.30 ”保险 公司 认为 每 个 参 保 人 存在 各 自 的 事故 率 , 而 当时 间 以 年 计 基 时 , 具有 
事故 率 和 的 参 保 人 的 索赔 次 数 按 速 率 为 的 泊 松 过 程 分 布 . 公司 也 认为 事故 率 是 
随 参 保 人 变化 的 , 一 个 新 的 参 保 人 的 事故 率 的 概率 分 布 是 (0,1) 上 的 均匀 分 布 . 问 
在 给 定 的 一 个 参 保 人 在 他 的 前 年 作 了 mn 次 索赔 下 , 直到 这 个 参 保 人 下 一 次 索赔 的 
时 间 的 条 件 分 布 是 什么 ? 

解 ”如 果 了 是 到 下 次 索赔 的 时 间 , 那么 我 们 要 计算 P{T > z|N(t) =n}. 取 条 件 在 
给 定 参 保 人 的 事故 率 上 , 用 方程 (5.28)， 


P{T > zIN(t) =7}= 网 P{T > zlL = M,N(t) =n}fzint) (Mn)dX 


[ WA 
本 国 
| eMAndA 
0 


A t 的 区 间 中 , 存在 一 个 发 生 多 于 n 次 事故 的 概率 的 精美 的 公式 . 
| “eT oo t n 

2 ， eo = | Xe Ce an (5.29) 
jt 

推导 它 , 这 是 因为 它 使 速率 为 和 的 泊 松 过 程 在 时 间 t 之 前 的 事件 个 数 大 于 n 的 概 
率 与 这 个 过 程 的 第 mn + 1 次 事件 发 生 的 时 间 ( 它 有 T(n + 1, A) 分 布 ) 小 于 t 的 概率 


相等 . 在 方程 (5.29) 中 交换 入 和 t 导出 等 价 的 恒等式 
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本 入 n 
ye oo | te-“ dz (5.30) 
j=n+1 0 加 


利用 方程 (5.27), 我 们 现在 得 到 


P{N(D) > n} = b> | Ot (Vay 
0 


i 人 owe (交换 


= 网 i Odxte-= (oD es dz (交换 ) 


= [Ws Gl(z)te-“ re 


5.5 ”随机 强度 函数 和 霍 克 斯 过 程 


不 同 于 非 时 齐 的 泊 松 过 程 的 强度 函数 A(t) 是 确定 的 函数 , 存在 计数 过 程 {N(t),t > 
0} 在 时 刻 t 强度 函数 的 值 , 记 之 为 R(t), 它 是 一 个 随机 变 二 , 其 值 依赖 于 直至 时 刻 
t 的 过 程 的 历史 . 就 是 说 , 若 将 直至 时 刻 t 的 过 程 的 “历史 ” 记 为 因 , 则 在 时 刻 t 的 
强度 率 R(t) 是 一 个 随机 变量 , 其 值 由 . 轻 所 确定 , 且 使 
P{N(t+h)— N(t) = 1|24} = R(t)h + o(h) 
和 
P{N(t+h)— N(t) > 2|24} = o(h) 
霍 克 斯 过 程 是 具有 随机 强度 函数 的 计数 过 程 的 例子 之 一 ， 这 种 计数 过 程 假定 
了 存在 一 个 基本 的 强度 值 A > 0, 且 对 每 个 事件 附 以 一 个 称 为 标志 值 的 非 负 的 随机 
变量 , 其 值 独立 于 以 前 发 生 的 一 切 事件 , 且 具 有 分 布 F. 假定 每 当 一 个 事件 发 生 时 ， 
随机 强度 函数 的 当前 值 就 增加 了 这 个 事件 的 标志 值 的 量 , 且 这 个 增加 的 量 以 指数 速 
率 按时 间 递 减 . 更 确切 地 , 若 到 时 刻 上 为 止 , 已 发 生 事件 的 总 数 为 N(t), 事件 的 发 生 
时 间 51 < 52 < … < Svwd, 记 第 i 个 事件 的 标志 值 为 Mi,i = 1,…, NN(t), 则 
N(t) 
R(t)=A+ 》， Mie (ts) 
i=1l 
换 句 话说 , 霍 克 斯 过 程 是 满足 如 下 条 件 的 计数 过 程 ; 
1. R(0) = a; 
2. 每 当 一 个 事件 发 生 时 , 过 程 的 随机 强度 增加 一 个 等 于 此 事件 的 标志 值 的 量 ; 
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3. 若 在 s 和 s 二 t 之 间 没 有 事件 发 生 , 则 R(s +t) = 和 + (R(s) 一 和 eet. 

因为 每 当 一 个 事件 发 生 时 强度 增加 , 所 以 称 霍 克 斯 过 程 为 自 激 过 程 . 

我 们 要 推导 霍 克 斯 过 程 直 至 时 刻 上 为 止 期 望 事件 数 E[N(t)] 的 公式 . 为 此 , 我 
们 需要 下 述 引 理 , 这 个 引 理 对 一 切 计数 过 程 都 是 成 立 的 . 
引 理 5.1 满足 N(0) = 0 的 计数 过 程 N(t), 其 随机 强度 函数 为 R(t). 记 m(t) = 
E[N(t)], 则 

ml(t) =| E[R(s)]ds. 
o 


证 明 
E[N(t + h)IN(t), R(t)] = N(t) + R(t)h + o(h) 
取 期 望 后 得 出 
E[N(t+h) = E[N(t)] + E[R(t)]h + o(h) 

这 就 是 

m(t+h) = m(t) + hE[R(t)] + o(h) 
从 而 

m(t+ 用 —m() _ lg) + EO 
令 h 一 0 就 得 出 

m’(t) = E[R(t)] 


现在 , 将 两 边 从 0 到 上 取 积 分 就 得 出 结果 
mb = | E[R(s)]ds 


利用 上 面 的 公式 , 我 们 现在 可 以 证 明 下 述 命题 . 图 
命题 5.6 ” 若 在 霍 克 斯 过 程 中 标志 值 的 均值 为 几 则 对 此 过 程 有 
EIN(O=At+ 厂 2 (et -1 一 (一 ab 


证 明 ”由 前 面 的 引 理 , 为 了 确定 均值 函数 m(t), 只 须 确定 E[R(t)], 后 者 由 首先 推导 
然后 求解 一 个 微分 方程 来 完成 . 首先 注意 , 令 Mi(h) 等 于 在 t 和 t+h 之 间 的 所 有 标 
志 值 之 和 , 则 
R(t+h) =A+ (R(t) — Me-os + Mi(h) + o(h) 
设 g(t) = E[R(t)], 并 对 上 式 取 期 望 , 就 得 出 
g(t+h) =A+ (g(t) — Ne-es + ELM:(h)] + o(h) 
利用 等 式 e-o* = 1 一 ah 十 o(h), 就 证 明了 
g(t+h)=A+ (g(t) — (1 — ah) + ELMe(h)] + o(h) 


= g(t) — ahg(t) + Aah + E[M:(h)] + o(h) 人 
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现在 , 在 给 定 R(t) 条 件 下 , 在 t 和 t+h 之 间 有 一 个 事件 的 概率 为 R(t)h + o(j)， 而 
有 2 个 或 更 多 的 事件 的 概率 为 o(h). 因此 , 考虑 到 / 是 标志 值 的 均值 , 取 条 件 于 在 
t 和 t+h 之 间 的 事件 数 , 有 


E[Mi(WIR()] = 1R(Oh + olh) 
对 上 式 两 边 取 期 望 就 得 出 
EIM(h)] = pg(D)h + o(h) 
将 它 代 回 方程 (5.31), 得 出 
g(t+h) = g(t) — ahg(t) + Mah + ug(t)h + o(h) 


或 者 , 等 价 地 有 
gt+h) -gt) 号 —90) (gt) + ha+ a 
令 h 趋 于 0, 就 得 出 

g(t) = (1 ~ a)g(t) + Mo 


令 f(t) = (J 一 a)g(t) + Xa 上 式 可 以 写成 


F(t) _ 

re f(t) 
从 而 

f'(t) 

Wolk 
求 积分 得 


In(f(t))= (4—- ot+C 
现在 因为 9(0) = E[R(0)] = 入 ,所 以 f(0) = LA, 这 表明 了 C = In(/A), 并 求 出 了 结果 


f(t) = AMew -et 
_yf0-Ma_ 7 
再 利用 9() = 一 G+ 一 二 5 推出 
. Ne not 
， Te 1) 
因此 , 由 引 理 5.1 得 到 
哺 A 
E[IN(t)]= Xt + 计 (ee )s 一 1)ds 
一 At+ 丰 2 (et 1— (pa)t) 


这 就 证 明了 结论 国 
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习 题 


， 修理 一 个 机 器 所 需要 的 时 间 T 是 均值 为 1/2( 小 时 ) 的 指数 随机 变量 . 


(a) 问 修理 时 间 超 过 1/2 小 时 的 概率 是 多 少 ? 
(b) 已 知 修理 持续 时 间 超过 12 小 时 , 问 修理 时 间 至 少 需要 123 小 时 的 概率 是 多 少 ? 


假设 你 到 达 一 个 单 服务 线 的 银行 , 你 发 现 有 5 个 人 在 银行 中 , 一 个 人 在 接受 服务 , 其余 4 个 


人 排队 等 待 , 你 加 入 到 队 尾 . 如 果 服 务 时 间 都 是 速率 为 A 的 指数 时 间 , 问 你 在 银行 的 平均 停 
留 时 间 是 多 少 ? 


, 令 X 是 指数 随机 变量 . 不 做 任何 计算 说 出 以 下 哪 一 个 是 正确 的 . 解释 你 的 答案 . 


(a) ELX2IX > 1] = E[(X + 1)3]; 
(b) E[X?|X > 1] = E[X?] +1; 
(c) E[X?|IX > 1] = (1 + E[X])?. 


.考察 一 个 有 2 个 雇员 的 邮局 , A、B、C 三 人 同时 进入 , A、B 直接 走向 雇员 ，C 需要 等 待 直 


至 A 或 B 离开 . 问 在 其 余 2 个 人 离开 后 , A 仍旧 在 邮局 中 的 概率 是 多 少 , 假定 
(a) 每 个 雇员 的 服务 时 间 恰 是 ( 非 随机 )10 分 钟 ? 

(b) 服务 时 间 以 概率 1/3 为 i,i= 1,2,3? 

(e) 服务 时 间 是 均值 为 1/A 的 指数 随机 变 是 ? 


. 若 X 是 速率 为 和 的 指数 随机 变量 , 证 明 Y = [X] + 1 是 参数 为 p = 1 一 e ”的 几何 随机 


变量 , 其 中 [X] 是 小 于 或 等 于 X 的 最 大 的 整数 . 


,在 例 5.3 中 , 如 果 办 事 员 i 以 指数 速率 Ai 服务 , i = 1,2, 证 明 


P{ 史 密斯 不 是 最 后 一 个 } = Ge) + G2) 


“7. 若 Xi 和 X2 是 独立 的 非 负 连续 随机 变量 , 证 明 


“10. 


11. 


T(t) 


PC < Xalmin(Xi, Xo) = 全 = rt) 


其 中 m(b 是 Xi 的 失败 率 函数 . 


,， 若 六 和 YY 分 别 是 速率 为 和 和 /的 指数 随机 变量 . 在 给 定 X < Y 条 件 下 , X 的 条 件 分 布 


是 什么 ? 


.机 器 1 正在 工作 , 机 器 2 将 从 现在 开始 上 时 间 后 进入 工作 ， 如 果 机 器 i 的 寿命 是 速率 为 


A 和 i(i = 1,2) 的 指数 时 间 , 问 机 器 1 先 失效 的 概率 是 多 少 ? 
令 久 和 Y 是 分 别 有 速 率 入 和 人 的 独立 指数 随机 变量 . 令 M = min(X,Y). 求 
(a) E[MXIM = X], 
(b) EIMXIM = Y], 
(©) Cov(X, M). 
令 久 , 了，,… ,Yn 是 独立 的 指数 随机 变量 , X 有 速率 和 , 而 Yi 有 速率 . 令 4; 是 此 nn 十 1 
个 随机 变量 中 的 第 j 个 最 小 值 是 Yi 中 之 一 这 个 事件 . 用 恒等式 
p=P(A1:……An) =P(A)P(A2|A1).…P(An|A1 :An-1) 
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求 p = P{X > maxi Yi}. 当 n=2 时 , 用 取 条 件 于 X 来 求 p 以 验证 你 的 答案 . 

如 果 Xi(i = 1,2,3) 是 速率 为 i(i = 1,2,3) 的 独立 指数 随机 变量 , 求 

(a) P{X1 < X2 < Xs}， 

(b) P{X1 < X2lmax(X1, X2, X3) = X3}, 

(c) Elmax Xi|X1 < X2 < Xs]， 

(qd) E[max Xi]. 

在 例 5.10 中 , 求 直到 队列 中 的 第 n 个 人 离开 队列 的 期 望 时 间 (或 者 由 于 进入 服务 , 或 者 没 
有 服务 就 离开 ). 

我 在 家 等 两 个 朋友 . 等 到 4 到 达 的 时 间 是 速率 为 Xe 是 指数 随机 变量 , 而 等 到 B 到 达 的 时 
间 是 速率 为 和 是 指数 随机 变量 . 一 旦 到 达 , 他 们 在 离开 我 家 前 , 分 别 停留 速率 为 ke 和 心 
的 指数 随机 时 间 . 假设 这 4 个 随机 变量 都 是 独立 的 . 

(a) A 在 B 前 到 达 且 在 B 后 离开 的 概率 是 多 少 ? 

(b) 最 后 一 人 离开 的 期 望 时 间 是 多 少 ? 

100 个 产品 同时 作者 命 检验 . 假设 各 个 产品 的 寿命 是 独立 的 均值 为 200 小 时 的 指数 随机 变 
基 . 当 总 共有 5 个 失效 时 检验 停止 . 如 果 T 是 检验 停止 的 时 间 , 求 E[T] 和 Var(T). 


有 三 个 工作 需要 处 理 , 工作 i(i = 1,2, 3) 的 处 理 时 间 是 速率 为 iu 的 指数 随机 变节 有 两 个 
可 用 的 处 理 器 , 于 是 可 以 立即 开始 处 理 两 个 工作 , 当 这 两 个 工作 有 一 个 完成 时 才 开 始 处 理 最 
后 一 个 工作 . 


(a) 令 TT 表示 工作 i 的 处 理 完成 的 时 间 ， 如 果 目 标 是 使 EITi + T2 + T3] 最 小 , 那么 当 
An < ja < 13 时 , 哪 两 个 工作 首先 被 处 理 ? 

(b) 令 M( 称 为 总 完工 时 间 ) 是 直到 三 个 工作 全 部 处 理 完 的 时 间 . 令 S 是 只 有 一 个 处 理 器 
在 工作 的 时 间 , 证 明 


3 
2E[M] = E[S] + > 1/ns 
et 

对 于 下 面 几 个 问题 , 假设 ja = ja = ,ps = 入. 令 P(p) 表示 最 后 完成 的 工作 是 工作 

1 或 工作 2 的 概率 . 令 P(A) = 1 一 P(/) 表示 最 后 完成 的 工作 是 工作 3 的 概率 . 
(c) 用 P(p) 和 P(A) 来 表达 E[S]. 

令 Pij(h) 是 当 工作 i 和 工作 j 首先 被 处 理 时 P(p) 的 值 . 
(d) 证 明 Pi2(j) < Pisa(1). 
(e) 如 果 上 > 和信, 证 明 当 工作 3 是 首先 被 处 理 的 工作 之 一 时 , E[M] 最 小 . 
(f) 如 果 J < 入 , 证 明 当 工 作 1 和 工作 2 首先 被 处 理 时 , E[M] 最 小 . 
n 个 城市 将 用 通信 系统 连接 . 在 城市 i 和 j 建造 连接 的 价格 是 Cij,i 天 也 必须 建造 足够 的 
连接 以 使 每 一 对 城市 有 一 条 连接 的 通路 . 结果 只 需 建造 n 一 1 个 连接 . 解 这 个 问题 (著名 的 
最 小 生成 树 问题 ) 的 一 个 最 小 价格 算法 首先 在 所 有 (:) 个 连接 中 选取 最 廉价 的 一 个 然 
后 , 在 附加 的 每 一 步 , 选取 连通 一 个 没有 任何 连接 的 城市 到 一 个 有 连接 的 城市 的 最 廉价 的 连 
接 . 即 如 果 首 个 连接 是 在 城市 1 和 2 之 间 , 那么 第 二 个 是 在 1 和 3,…,n 中 的 一 个 之 间 的 
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“19. 


20. 


21. 


22. 


“23. 


连接 , 或 者 是 在 2 和 3,…,n 中 的 一 个 之 间 的 连接 . 假设 所 有 (:) 个 连接 的 价格 Cij 是 


均值 为 1 的 独立 指数 随机 变量 . 求 上 面 的 算法 的 期 望 价格 , 如 果 (a) n= 3, (b) n = 4. 
令 Xi 和 X2 是 独立 的 指数 随机 变量 , 每 个 具有 速率 J. 令 


Xo) = min(Xi, Xa), Xa) = max(X1, Xa 


求 ; (ajE[X()]， (b)Var[X0)], (co)ELXG)], (d)Var[Xc2)]. 
在 A 和 B 间 进行 的 一 英里 比赛 中 ,A 跑 完 一 英里 的 时 间 是 速率 为 Xe 的 指数 随机 变量 , 独 
立地 , B 跑 完 一 英里 的 时 间 是 速率 为 Xe 的 指数 随机 变量 . 最 早 完成 的 人 将 成 为 得 胜 者 并 接 
受奖 金 Re-"t 元 , 其 中 t 是 得 胜 的 时 刻 , R 和 a 都 是 常数 . 若 输 的 人 只 得 到 0 元 . 求 4 赢 
得 的 期 望 额 . 
考虑 有 两 条 服务 线 的 系统 , 顾客 先 接受 服务 线 1 服务 , 再 到 服务 线 2, 然后 离开 . 服务 线 i 
的 服务 时 间 是 速率 为 Js; 的 指数 随机 变量 , i = 1,2. 当 你 到 达 时 , 你 发 现 服务 线 1 有 空 , 而 
在 服务 线 2 那里 有 两 个 顾客 , 顾客 A 在 接受 服务 , 顾客 B 在 队 中 等 候 . 
(a) 求 当 你 到 服务 线 2 时 , A 还 在 接受 服务 的 概率 PA. 
(b) 求 当 你 到 服务 线 2 时 , B 还 在 接受 服务 的 概率 Pe. 
(©) 求 E[T, 其 中 T 是 你 在 系统 中 的 时 间 . 
提示 , 写 出 

T=5+52+Wa+WBe 
其 中 5; 是 你 在 服务 线 i 的 服务 时 间 , WA 是 当 A 在 接受 服务 时 你 在 队 中 等 候 的 时 间 , 而 
We 是 当 B 在 接受 服务 时 你 在 队 中 等 候 的 对 间 . 
在 某 个 系统 中 , 一 个 顾客 必须 先 接受 服务 线 1 服务 , 而 后 接受 服务 线 2 服务 服务 线 i 的 
服务 时 间 是 速率 为 ju(i = 1,2) 的 指数 随机 变量. 到 达 的 顾客 发 现 服务 线 1 忙 着 就 在 队列 
中 等 候 . 顾客 接受 服务 线 1 服务 后 , 如 果 服 务 线 2 有 空 , 就 接受 服务 线 2 的 服务 , 否则 仍 待 
在 服务 线 1 处 (阻塞 了 其 他 顾客 进入 服务 ) 直到 服务 线 2 空 . 顾客 在 完成 服务 线 2 的 服务 
后 离开 系统 . 假设 在 你 到 达 时 系统 中 有 一 个 顾客 , 而 且 这 个 顾客 正在 服务 线 1 接受 服务 . 问 
你 在 系统 中 的 期 望 总 时 间 是 多 少 ? 
假设 在 习题 21 中 , 在 你 到 达 时 发 现 系统 中 有 两 个 人 , 一 个 正在 接受 服务 线 1 服务 , 另 一 个 
正在 接受 服务 线 2 服务 . 问 你 在 系统 中 的 平均 总 时 间 是 多 少 ? 记 住 如 果 服 务 线 1 先 于 服务 
线 2 完成 服务 , 那么 服务 线 1 的 顾客 仍 将 留 在 那里 (于 是 阻塞 了 你 的 进入 ) 直到 服务 线 2 
空闲 着 . 
一 个 手电 简 需 要 用 2 个 电池 . 现 有 一 组 n 个 可 用 电池 , 标 为 电池 1, 电池 2,… , 电池 n. 开 
始 装 入 电池 1 和 电池 2. 只 要 一 个 电池 失效 , 立刻 换 上 一 个 标 以 最 低 数 而 还 没有 用 过 的 可 
用 电池 . 假设 不 同 的 电池 的 寿命 是 独立 的 指数 随机 变量 , 每 个 具有 速率 Jj. 以 了 记 一 个 电 
池 失 效 而 我 们 的 库存 正好 用 完 的 随机 时 间 . 这 时 恰 有 一 个 电池 X 还 没有 失效 . 
(a) P{X =n} 是 多 少 ? 
(b) P{X = 1} 是 多 少 ? 
(c) P{X = 讨 是 多 少 ? 
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27. 
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(d) 求 EIT]. 

(e) 了 的 分 布 是 什么 ? 

有 两 条 服务 线 处 理 mn 件 零 活 . 最 初 , 每 条 服务 线 先 处 理 一 件 零 活 ， 只 要 一 条 服务 线 完成 了 

一 件 零 活 , 这 件 零 活 就 离开 系统 , 并 且 这 个 服务 线 开始 处 理 新 的 零 活 ( 当 仍旧 有 等 待 处 理 的 

零 活 时 )， 以 了 记 直 到 所 有 的 零 活 都 处 理 完 的 时 间 . 如 果 服 务 线 i 处 理 一 件 零 活 的 时 间 以 

速率 ji(i = 1,2) 指数 地 分 布 , 求 E[T] 和 Var(T). 

顾客 可 以 由 3 条 服务 线 中 的 任意 一 条 服务 , 其 中 服务 线 i 的 服务 时 间 以 速率 ji(i = 1,2, 3) 

指数 地 分 布 . 当 一 条 服务 线 空闲 时 , 等 候 时 间 最 长 的 顾客 开始 接受 这 条 服务 线 服务 . 

(a) 如 果 你 到 达 时 发 现 所 有 3 条 服务 线 都 忙 , 而 且 无 人 等 着 , 求 直到 你 离开 系统 的 期 望 时 
间 . 

(b) 如 果 你 到 达 时 发 现 所 有 3 条 服务 线 都 忙 , 而 且 有 一 个 人 等 着 , 求 直 到 你 离开 系统 的 期 望 
时 间 . 

每 个 进入 的 顾客 必须 首先 经 服务 线 1 服务 , 然后 经 服务 线 2 服务 , 最 后 经 服务 线 3 服务 

由 服务 线 i 服务 的 时 间 是 速率 为 jui(i = 1, 2, 3) 的 指数 随机 变量 . 假设 你 进入 系统 时 ,只 有 

一 个 顾客 , 而 且 他 正在 接受 服务 线 3 服务 

(a) 求 你 转 到 服务 线 2 时 , 服务 线 3 仍 在 忙 的 概率 . 

(b) 求 你 转 到 服务 线 3 时 , 服务 线 3 仍 在 忙 的 概率 . 

(c) 求 你 在 系统 中 的 期 望 时 间 (只 要 你 过 到 一 条 忙 的 服务 线 , 就 必须 等 到 当前 服务 结束 ). 

(d) 如 果 你 进入 系统 时 发 现 系统 中 有 一 个 顾客 , 而 且 他 正 接受 服务 线 2 服务 ， 求 你 在 系统 
中 的 期 望 时 间 . 

证 明 在 例 5.7 中 两 个 算法 的 总 价格 的 分 布 是 相同 的 . 

考虑 有 独立 寿命 的 n 个 部 件 , 部 件 i 以 一 个 速率 为 Ai 的 指数 时 间 工 作 . 假设 所 有 的 部 件 

在 开始 时 都 在 使 用 中 , 而 且 使 用 到 直到 失效 . 

(a) 求 部 件 1 是 第 二 个 失效 的 概率 . 

(b) 求 第 二 个 失效 的 期 望 时 间 . 

提示 ， 不 要 用 (a) 的 结果 . 

令 X 和 YY 是 分 别 具 有 速率 为 入 和 的 独立 指数 随机 变量 , 其 中 入 > k. 令 c > 0. 

(a) 证 明 给 定 X 十 Y = c 时 X 的 条 件 密度 函数 是 


(一 je-C-m= 


Te 人 


Jxix+yr(zlc) = 


(b) 用 (a) 求 EIXIX +Y = dd. 

(ec) 求 EIYIX +Y = qd. 

某 人 养 的 狗 和 猫 的 寿命 是 分 别 是 有 速率 和 a 和 Xe 的 独立 的 指数 随机 变量 . 其 中 一 只 刚刚 死 
去 . 求 另 一 只 宠物 的 后 续 寿 命 . 

某 医生 有 两 个 预约 病人 , 一 个 在 下 午 1 点 , 而 另 一 个 在 下 午 1:30. 约定 的 持续 时 间 是 均值 
为 30 分 钟 的 独立 指数 随机 变量 . 假设 两 个 病人 都 准时 到 达 , 求 约定 在 1:30 的 病人 在 医生 
的 办 公 室 所 花 的 期 望 时 间 . 

令 久 是 (0, 1) 上 的 均匀 随机 变量 , 考虑 一 个 计数 过 程 , 其 中 事件 在 时 间 义 +i(i = 0, 1,2,…) 
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发 生 . 

(a) 这 个 计数 过 程 是 否 有 独立 增 量 ? 

(b) 这 个 计数 过 程 是 否 有 平稳 增 其? 

令 X 和 了 是 分 别 以 入 和 人 为 速率 的 独立 的 指数 随机 变量 . 

(a) 论证 : 在 X > Y 的 条 件 下 , 随机 变量 min(X,Y) 与 XX 一 Y 2 
(b) 利用 (a) 得 到 结论 , 对 于 任意 正常 数 c, 证 明 


Elmin(X,Y)|X >Y +d= EImin(X,Z)IX > 7] 


= Elmin(X,Y)] = pe 


(0) 给 出 口头 解释 为 什么 min(X,Y) 与 X 一 Y 是 (无 条 件 地 ) 独立 的 
两 个 病人 A 和 B 都 需要 坚 脏 移植 .如 果 没 有 可 供 的 肾脏 , 那么 A 将 在 一 个 速率 为 ka 的 
指数 时 间 后 死去 , 而 B 将 在 一 个 速率 为 ke 的 指数 时 间 后 死去 ， 新 的 肾脏 按 一 个 速率 为 入 
的 泊 松 过 程 到 达 . 已 经 决定 了 第 一 个 肾脏 将 给 A (如 果 B 活着 而 A 已 死去 则 给 B), 而 下 
一 个 给 B (如 果 B 仍旧 活着 ) . 
(a) A 得 到 一 个 新 的 肾脏 的 概率 是 多 少 ? 
(b) B 得 到 一 个 新 的 肾脏 的 概率 是 多 少 ? 
(ec) A 和 B 都 没有 得 到 新 肾脏 的 概率 是 多 少 ? 
(d) A 和 B 都 得 到 新 肾脏 的 概率 是 多 少 ? 
若 {N(t),t > 0} 是 速率 入 的 泊 松 过 程 , 验证 {N,(),t > 0} 满足 速率 和 的 泊 松 过 程 这 一 
公理 , 其 中 Ns(t) = N(s+t) 一 N(s). 
以 S(t) 记 一 种 证 券 在 时 间 t 的 价格 . 过 程 {S(t),t > 0} 的 一 个 流行 的 模型 假设 价格 直到 
一 个 “冲击 ”发 生前 保持 不 变 , 在 冲击 发 生 时 价格 乘 上 一 个 随机 因子 . 如 果 我 们 以 N(t) 记 
在 时 间 上 之 前 冲击 的 个 数 , 而 以 X, 记 第 i 个 乘积 因子 , 那么 此 模型 假设 了 

N(t) 


s(t) = 5(0) [IL x: 
El 


其 中 在 N(t) = 0 时 , IT X;=1. 假设 X, 是 速率 为 上 的 独立 指数 随机 变 荆 ,{N(t),t>0} 
是 速率 为 和 的 泊 松 过 程 , {N(t),t > 0} 独立 于 Xi, 并 且 5(0) = s. 

(a) 求 E[S(2)]. 

(b) 求 E[S?(4)]. 

一 台 机 器 运行 的 时 间 是 速率 为 . 的 指数 随机 变量 , 此 后 它 出 现 故 障 . 修理 队 检查 机 器 的 时 
刻 以 速率 为 和 的 泊 松 过 程 到 达 ， 如 果 发 现 机 器 故障 , 就 立刻 替换 求 机 器 的 两 次 替换 之 间 
的 平均 时 间 . 

令 {Mi(t),t > 0}(i = 1,2,3) 是 速率 分 别 为 和 (i = 1,2,3) 的 独立 泊 松 过 程 , 并 且 设 


Ni(t) = Mi(t) + Ma(t), Nalt) = Ma(t) + Malt) 
随机 过 程 {( 和 N1(t), N2(t)),t > 0} 称 为 二 维 泊 松 过 程 . 
(a) 求 P{Ni(t) =n, Na(t) = m}. 


(b) 求 Cov(Ni(t), N2(t)). 
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某 种 理论 假设 细胞 分 裂 的 错误 按 速率 每 年 2.5 个 的 泊 松 过 程 发 生 , 而 人 体 在 发 生 了 196 个 
这 种 错误 后 死亡 . 假设 该 理论 成 立 , 求 

(a) 人 的 平均 寿命 . 

(b) 人 的 寿命 的 方差. 

此 外 , 近似 地 求 

(c) 人 在 67.2 岁 前 死亡 的 概率 . 

(d) 人 活 到 90 岁 的 概率 . 

(e) 人 活 到 100 岁 的 概率 . 

证 明 若 {Ni(t),t > 0} 是 速率 为 和 i(i = 1,2) 的 独立 泊 松 过 程 , 则 {N(t),t > 0} 是 速率 为 
和 1 十 和 a 的 泊 松 过 程 , 其 中 N(t) = Ni(t) + Nz(t). 

在 习题 40 中 , 这 个 复合 过 程 的 首 个 事件 来 自 Ni 过 程 的 概率 是 多 少 ? 

令 {N(t),t > 0} 是 速率 为 和 的 泊 松 过 程 . 以 S" 记 第 n 个 事件 发 生 的 时 间 . 求 

(a)E[Sa], 

(b) E[SsIN(1) = 中， 

(©) ELIN(4) — N(2)IN(1) = 3l. 

顾客 按 速率 为 和 的 泊 松 过 程 到 达 有 两 条 服务 线 的 服务 站 . 只 要 新 的 顾客 到 达 , 在 系统 中 的 
顾客 就 立刻 离开 . 新 的 顾客 首先 接受 服务 线 1 服务 , 然后 是 服务 线 2. 如 果 在 服务 线 的 服务 
时 间 是 独立 的 速率 分 别 为 J 和 /ua 的 指数 时 间 , 问 在 已 进入 的 顾客 中 完成 服务 线 2 的 服务 
的 比例 是 多 少 ? 

汽车 按 速率 为 和 的 泊 松 过 程 经 过 街 的 某 个 位 置 . 一 个 需要 在 这 个 位 置 过 街 的 妇女 等 着 , 直 
到 看 到 没有 车 她 才 在 随后 的 个 时 间 单位 通过 . 

(a) 求 她 的 等 待 时 间 是 0 的 概率 . 

(b) 求 平均 等 待 时 间 . 

提示 ， 对 首 辆 车 到 达 的 时 间 取 条 件 . 

令 {NN(t),t > 0} 是 速率 为 和 的 泊 松 过 程 , 它 独立 于 有 均值 上 和 方差 o? 的 非 负 随机 变量 
T. 求 (a)Cov(T, N(T)), (b)Var(N(T)). 

令 {N(),t > 0} 是 速率 为 和 的 泊 松 过 程 , 它 独立 于 有 均值 J 和 方差 o? 的 独立 同 分 布 序 


列 Xi Xa，…… 求 i 
Cov (wo > 了 *) 


考虑 有 两 条 服务 线 的 并 行 排队 系统 , 其 中 顾客 按 速率 为 和 的 泊 松 过 程 到 达 , 而 服务 时 间 是 
速率 为 4 的 指数 时 间 . 此 外 , 假设 到 达 者 发 现 两 条 服务 线 都 忙 , 就 不 接受 任何 服务 而 立刻 离 
开 (这 称 为 顾客 流失 )， 只 要 发 现 至 少 有 一 条 服务 线 有 空 ， 就 立刻 接受 服务 而 在 服务 完成 后 
离开 . 

(a) 如 果 两 条 服务 线 现在 都 忙 , 求 直 到 第 二 个 顾客 进入 系统 的 平均 时 间 . 

(b) 在 开始 时 系统 是 空 着 . 求 直 到 两 条 服务 线 都 忙 的 平均 时 间 . 

(©) 求 相继 的 两 个 流失 顾客 之 间 的 平均 时 间 . 

考虑 有 n 条 服务 线 的 并 行 排队 系统 , 其 中 顾客 按 速率 为 和 的 泊 松 过 程 到 达 , 而 服务 时 间 是 
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速率 为 上 的 指数 时 间 . 此 外 , 假设 到 达 者 发 现 所 有 的 服务 线 都 忙 , 就 不 接受 任何 服务 而 立刻 
离开 . 如 果 一 个 到 达 者 发 现 所 有 的 服务 线 都 忙 , 求 

(a) 下 一 个 到 达 者 发 现 正在 忙 的 服务 线 的 期 望 数 . 

(b) 下 一 个 到 达 者 发 现 所 有 服务 线 都 闲 着 的 概率 . 

(e) 下 一 个 到 达 者 发 现 恰 有 i 条 服务 线 有 空 的 概率 . 

事件 按 速率 为 和 的 泊 松 过 程 发 生 . 在 每 个 事件 发 生 的 时 间 , 我 们 必须 决定 继续 还 是 停止, 使 
我 们 的 对 象 在 一 个 特定 的 时 刻 T 以 前 在 最 后 的 一 个 事件 发 生 的 时 间 上 停止 , 其 中 了 > 1/ 入 . 
即 如果 一 个 事件 在 时 间 t (0 < t < 了) 发 生 , 并 且 我 们 决定 停止, 那么 若 在 了 之 前 没有 附 
加 事件 , 则 我 们 赢 ， 和 否则 我 们 都 输 ， 若 在 一 个 事件 发 生 时 我 们 没有 停止 ， 而 在 了 之 前 又 没 
有 附加 事件 , 则 我 们 输 ， 此 外 , 若 在 了 之 前 没有 事件 , 则 我 们 输 ， 考 察 在 一 个 固定 的 时 间 
3 (0< s < 了) 后 的 首 个 事件 发 生 时 停止 的 策略 . 

(a) 使 用 这 个 策略 时 赢 的 概率 是 多 少 ? 

(b) 使 得 赢 的 概率 达到 最 大 的 s 值 是 多 少 ? 

(e) 证 明 一 个 人 在 用 以 上 的 策略 , 并 且 按 (b) 指定 的 s 值 时 , 他 赢 的 概率 是 1/e. 

火车 相继 到 站 之 间 的 小 时 数 均匀 地 分 布 在 (0, 1) 上 . 乘客 按 速率 为 每 小 时 7 人 的 泊 松 过 程 
到 达 . 假设 一 辆 火车 刚 离 站 . 以 X 记 箭 下 一 辆 火车 的 人 数 . 求 (a)E[X]， (b)Var(X). 
如 果 一 个 人 以 前 开车 从 来 没有 出 过 交通 事故 , 那么 他 在 下 一 个 h 时 间 单位 中 有 一 次 事故 的 
概率 是 Bh + o(h). 另 一 方面 , 如 果 他 在 以 前 出 过 交通 事故 , 那么 这 个 概率 是 ah 十 o(h). 求 
一 个 人 在 时 间 t 之 前 的 平均 事故 个 数 . 

球 队 1 与 球 队 2 进行 比赛 . 球 队 按 速率 分 别 为 和 和 和 2 的 泊 松 过 程 得 分 . 如 果 在 其 中 一 个 
球 队 比 另 一 个 多 大 个 得 分 时 比赛 停止 , 求 球 队 1 赢 的 概率 . 

提示 : 将 它 与 财 徒 破产 问题 联系 . 


吉森 水 库 的 苹 水 水 平 按 每 天 1000 单位 的 常数 速率 耗损 . 水 库 水 源 由 随机 发 生 的 降雨 补给 , 降 
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雨 按 每 天 0.2 的 速率 的 泊 松 过 程 发 生 ， 由 一 次 降雨 加 进 水 库 的 水 量 以 概率 0.8 为 5000 单 
位 , 而 以 概率 0.2 为 8000 单位 . 现在 的 著 水 水 平 刚刚 稍 低 于 5000 单位 . 

(a) 在 5 天 后 水 库 空 的 概率 是 多 少 ? 

(b) 在 以 后 的 10 天 中 的 某 个 时 间 水 库 空 的 概率 是 多 少 ? 

通常 知道 一 个 病毒 的 长 度 1 的 线性 DNA 分 子 包含 某 个 标记 位 置 , 这 个 标记 的 确切 位 置 是 
未 知 的 . 一 个 定位 标记 位 置 的 方法 是 将 这 些 分 子 用 化 学 制剂 切 开 , 使 切 开 的 点 按 一 个 速率 为 
入 的 泊 松 过 程 选取 . 随后 就 可 能 确定 含有 标记 位 置 的 片断 . 例如 , 以 m 记 标记 在 直线 上 的 
位 置 , 那么 如 果 以 L1 记 在 m 之 前 最 后 一 个 泊 松 事件 的 时 间 (或 0, 如 果 在 [0, m] 中 没有 泊 
松 事件 ), 以 Ri 记 在 m 之 后 首 个 泊 松 事件 的 时 间 (或 1, 如 果 在 中 [m, 1] 没有 泊 松 事件 )， 
那么 就 可 以 知道 标记 位 置 在 Ll 和 Ri 之 间 . 求 

(a) P{L1=0}, 

(b) P{L1<z},0<z<m, 

(c) P{R1=1}, 

(d) P{R >zjm<z<1l. 

通过 在 DNA 分 子 的 相同 的 拷贝 上 重复 上 面 的 过 程 , 我 们 能 够 专心 注意 标记 位 置 的 定位 . 如 
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果 切 割 程序 用 在 分 子 的 n 个 相同 的 拷贝 上 产生 数据 Li, Ri(i = 1,…,n), 那么 由 此 推出 标 
记 位 置 在 L 和 RR 之 间 , 其 中 
L=maxL, R=minR: 

(e) 求 E[R 一 妃 , 同时 证 明 E[R 一 工 ] ~ 2/(nA). 
考虑 一 个 单 服务 线 的 排队 系统 , 其 中 顾客 按 速率 为 和 的 泊 松 过 程 到 达 , 服务 时 间 是 速率 为 
人 的 指数 时 间 , 顾客 按 到 达 的 次 序 接受 服务 . 假设 一 个 顾客 到 达 时 发 现在 系统 中 有 n 一 1 个 
顾客 . 以 X 记 这 个 顾客 离开 时 系统 中 的 人 数 . 求 X 的 概率 质量 函数 . 
每 天 一 个 事件 以 概率 p 独立 地 发 生 . 以 N(n) 记 前 n 天 发 生 的 事件 的 总 数 , 而 以 人 记 第 
7 个 事件 发 生 的 那天 . 
(a) N(n) 的 分 布 是 什么 ? 
(b) Ti 的 分 布 是 什么 ? 
(c) T 的 分 布 是 什么 ? 
(d) 给 定 N(n) =7, 证 明 发 生 事件 的 > 天 的 无 序 集合 与 从 1,2,…,n 随机 选取 的 (不 放 回 ) 

"个 有 相同 的 分 布 . 
事件 按 速率 为 每 小 时 和 = 2 的 泊 松 过 程 发 生 . 
(a) 在 下 午 8:00 到 9:00 没有 事件 发 生 的 概率 是 多 少 ? 
(b) 从 正午 开始 , 到 第 四 个 事件 发 生 的 期 望 时 间 是 多 少 ? 
(c) 在 下 午 6:00 到 8:00 有 两 个 或 两 个 以 上 事件 发 生 的 概率 是 多 少 ? 
在 每 局 游戏 中 , 参赛 人 成 功 的 概率 为 p, 失败 的 概率 为 1 一 p. 参赛 人 若 某 局 成 功 则 谨 得 一 
个 随机 的 按 参数 和 的 指数 分 布 的 收益 . 失败 的 参赛 人 失去 迄今 为 止 已 经 积累 的 一 切 , 且 不 
能 再 参加 下 一 局 游戏 . 在 一 局 成 功 以 后 , 赢家 可 以 保留 已 得 的 一 切 而 选择 离开 , 或 者 选择 继 
续 新 一 局 . 假设 一 个 新 来 的 参赛 人 计划 继续 参赛 直至 其 所 赢 超过 t 或 出 现 失败 . 
(a) 如 果 直 至 其 所 赢 超过 t, 他 成 功 局 数 的 N 的 分 布 是 什么 ? 
(b) 参赛 人 成 功 地 至 少 赢得 财富 t 的 概率 是 多 少 ? 
(c) 在 参赛 人 成 功 的 条 件 下 , 他 期 望 赢得 是 多 少 ? 
(d) 参赛 人 的 期 望 赢得 是 多 少 ? 
保险 公司 有 两 种 类 型 的 理赔 ， 以 _Ni(t) 记 在 时 间 t 之 前 类 型 i 理赔 的 个 数 ， 并 且 假 设 
{Ni(t),t > 0} 和 {N2(t),t > 0} 是 独立 的 泊 松 过 程 , 具有 速率 和 1 = 10 和 和 2 = 1. 类 型 1 
相继 的 理赔 额 是 均值 为 $1000 的 独立 指数 随机 变量 , 而 类 型 2 的 理赔 额 是 均值 为 $5000 的 
独立 指数 随机 变量 . 刚 接 到 的 一 个 $4000 的 理赔 , 问 是 类 型 1 的 概率 是 多 少 ? 
顾客 按 速率 为 和 的 泊 松 过 程 进入 银行 . 假设 两 个 顾客 在 第 一 小 时 内 到 达 . 下 面 的 概率 分 别 
是 多 少 ? 
(a) 两 个 顾客 都 在 前 20 分 钟 内 到 达 . 
(b) 至 少 一 个 顾客 在 前 20 分 钟 内 到 达 . 
一 个 系统 存在 随机 多 个 缺陷 ,发 们 假定 它 有 均值 为 c 的 泊 松 分 布 . 每 个 缺陷 独立 地 在 一 个 
有 具有 分 布 G 的 随机 时 间 引 起 系统 故障 . 在 系统 故障 发 生 时 , 假设 缺陷 引起 的 故障 立刻 被 定 
位 和 区 正 . 
(a) 在 时 间 t 之 前 的 故障 数 的 分 布 是 什么 ? 


习 题 291 


62. 


63. 


“64. 


65. 


66. 


67. 


68. 


(b) 在 时 间 上 留 在 系统 中 的 缺陷 个 数 的 分 布 是 什么 ? 
(c) 在 (a) 和 (b) 中 的 随机 变量 是 否 相依 或 独立 ? 
假设 在 课本 中 的 印刷 错误 的 个 数 是 速率 为 和 的 泊 松 过 程 . 由 两 个 校对 员 独 立地 校对 这 个 课 
本 . 假设 错误 独立 地 以 概率 Pi 被 校对 员 i 发现 (i = 1,2). 以 Xi 记 被 校对 员 1 发 现 而 没有 
被 校对 员 2 发 现 的 错误 个 数 . 以 X2 记 被 校对 员 2 发 现 而 没有 被 校对 员 1 发 现 的 错误 个 数 . 
以 Xs 记 被 两 个 校对 员 都 发 现 的 错误 个 数 . 以 X4 记 两 个 校对 员 都 没有 发 现 的 错误 个 数 . 
(a) 描述 XX1, XX2, Xs, Xa 的 联合 分 布 . 
(b) 证 明 

ElX1] _ 1-p2 ElX2] _ 1-p 

E[Xs] p2 E[Xs] Pi 


下 面 假设 和 ,pi, pz 是 未 知 的 . 
(e) 用 Xi 作为 E[Xi](i = 1,2,3) 的 估计 , 求 pi,p2 和 入 的 一 个 估计 . 
(d) 给 出 两 个 校对 员 都 没有 发 现 的 错误 个 数 X4 的 一 个 估计 . 
考察 一 个 有 无 穷 多 条 服务 线 的 排队 系统 , 顾客 按 泊 松 过 程 到 达 , 而 服务 时 间 分 布 是 速率 为 
上 的 指数 分 布 . 以 X(b) 记 在 时 间 t 系统 中 的 顾客 数 . 求 
(a) E[X(t + s)|X(s) = n]; 
(b) Var(X(t + s)|X(s) = n); 
提示 , 将 在 时 间 上 十 s 系统 中 的 顾客 分 为 老 顾 客 和 新 顾客 . 
(c) 如 果 目 前 恰 有 一 个 顾客 在 系统 中 , 求 当 这 个 顾客 离开 时 系统 变 空 的 概率 . 
假定 人 群 按 速率 为 和 的 泊 松 过 程 到 达 公共 汽车 站 . 公共 汽车 在 时 间 t 出 发 . 以 X 记 在 时 间 
t 所 有 上 车 的 人 的 总 等 待 时 间 . 我 们 要 确定 Var(X). 以 N(t) 记 在 时 间 t 之 前 到 达 的 人 数 . 
(a) E[XIN(t)] 是 多 少 ? 
(b) 论证 Var(XIN(t)) = N(t)#2/12. 
(©) Var(X) 是 多 少 ? 
每 年 在 加 州 平均 有 500 人 通过 律师 考试 . 一 个 加 州 律师 平均 从 事 法 律 30 年 . 假定 这 些 数 保 
持 不 变 , 你 估计 加 州 在 2050 年 加 州 将 有 多 少 律师 ? 
某 保险 公司 的 参 保 人 按 速率 为 和 的 泊 松 过 程 分 布 的 时 间 发 生 事故 . 从 事故 发 生 直到 完成 一 
次 理赔 的 时 间 有 分 布 G. 
(a) 求 恰 有 n 个 事故 发 生 , 但 是 在 时 间 t 还 没有 报告 理赔 的 概率 . 
(b) 假设 每 个 理赔 额 有 分 布 下, 而 理赔 额 与 它 报告 理赔 的 时 间 独 立 . 求 在 时 间 t 还 没有 报告 
理赔 的 所 有 事故 的 平均 总 理赔 额 . 
卫星 按 速率 为 和 的 泊 松 过 程 发 射 上 天 . 每 个 卫星 在 落地 前 在 太空 停留 一 个 随机 的 时 间 (有 
分 布 G). 求 在 时 间 t 太空 中 没有 在 时 间 s 前 发 射 的 卫星 的 概率 , 其 中 s < t. 
假设 有 随机 振幅 的 电击 发 生 的 时 间 按 速率 为 和 的 泊 松 过 程 {N(t),t > 0} 分 布 . 假设 相继 
的 电击 的 振幅 与 其 他 振幅 和 电击 到 达 的 时 间 都 独立 , 而 且 振 幅 有 一 个 均值 为 上 的 分 布 F. 
再 假设 电击 的 振幅 对 时 间 按 指数 速率 a 递减 , 即 一 个 初始 振幅 4 经 过 一 个 附加 的 时 间 z 
损耗 后 其 值 为 Ae-"”. 以 A(t) 记 在 时 间 t 的 所 有 振 福 的 和 . 即 
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70. 


71. 


72. 


73. 


74. 


N(t) 
三 Yo Me 
其 中 A 和 S; 是 初始 振幅 和 电击 ; 的 到 这 时 间 . 
(a) 通过 取 条 件 于 N(t), 求 EL4(t]. 
(b) 不 作 任何 计算 , 解释 为 什么 4(t) 与 例 5.21 中 的 D(t) 有 相同 的 分 布 . 
假设 在 例 5.19 中 , 一 辆 车 可 以 不 减 慢 速度 地 超越 一 辆 较 慢 的 车 . 假设 在 时 刻 s 驶 入 公路 的 
车 具有 自由 行驶 速度 to. 求 在 路 上 遇见 (或 者 超过 , 或 者 被 超过 ) 的 其 他 车 总 数 的 分 布 . 
对 于 按 泊 松 到 达 的 无 穷 服务 线 的 排队 系统 和 一 般 的 服务 时 间 分 布 G, 求 以 下 的 概率 ， 
(a) 第 一 个 到 达 的 顾客 也 第 一 个 离开 . 
令 S(t) 等 于 在 时 间 t 留 在 系统 中 的 所 有 顾客 的 剩余 服务 时 间 的 和 | 
(b) 论证 S(t) 是 复合 泊 松 随机 变量 . 
(0) 求 E[S(2)]. 
(d) 求 Var(S(t)). 
以 Sn 记 速 率 为 和 的 泊 松 过 程 {N(t), t > 0} 的 第 m 个 事件 发 生 的 时 间 .证 明 对 于 任意 函数 
g, 随机 变量 于 ?人 9g( Si) 与 复合 泊 松 随机 变量 于 > g(U:) 有 相同 的 分 布 , 其 中 Di Ca 
是 独立 于 均值 为 Xt 的 泊 松 随机 变量 N 的 一 系列 独立 同 分 布 的 (0,b) 均匀 随机 变量 ， 随 之 
得 到 结论 


N(t) 


N(t) 让 t 
全 os = x sdr “=( > ol)】 = | g(r)dr 


1 i=1 


一 辆 有 轨 绕 车 带 着 n 个 乘客 出 发 . 在 缆车 相继 的 停 站 之 间 的 时 间 是 速率 为 和 的 独立 指数 

随机 变节 .每 站 有 一 个 乘客 下 车 , 这 不 花 任 何 时 间 , 也 没有 任何 乘客 上 车 ,在 一 个 乘客 下 车 

后 , 他 走路 回 家 . 与 其 他 所 有 的 一 切 都 独立 , 走路 回 家 需要 速率 为 4 的 指数 时 间 ， 

(a) 最 后 一 个 乘客 离开 缆车 的 时 间 的 分 布 是 什么 ? 

(b) 假定 最 后 一 个 乘客 在 时 间 t 离开 缆车 . 问 其 他 乘客 在 此 刻 都 已 回 到 家 的 概率 是 多 少 ? 

震动 按 速率 为 和 的 泊 松 过 程 发 生 , 每 个 震动 独立 地 引起 某 个 系统 失效 的 概率 为 p. 以 了 记 

系统 失效 时 的 时 间 , 并 以 N 记 发 生 的 震动 个 数 . 

(a) 求 给 定 N =n 时 了 的 条 件 分 布 . 

(b) 计算 给 定 了 = t 时 NN 的 条 件 分 布 , 并 且 注 意 它 与 1 加 一 个 均值 为 和 (1 一 p)t 的 泊 松 随 
机 变量 同 分 布 . 

(c) 解释 为 什么 不 用 任何 计算 就 能 得 到 (b) 中 的 结果 

在 某 个 地 点 的 失物 件数 记 为 X, 它 是 一 个 均值 为 的 泊 松 随机 变量 ， 在 搜查 这 个 地 点 时 ， 

每 件 失物 将 独立 地 在 一 个 速率 为 上 的 指数 时 间 后 被 找到 . 找到 每 件 失物 的 报酬 为 R, 而 在 

每 个 单位 搜查 时 间 所 用 的 搜查 费用 为 C. 假设 你 搜查 了 一 个 固定 的 时 间 t, 然后 停止 . 

(a) 求 总 期 望 回报 . 

(b) t 取 多 少 使 总 期 望 回 报 最 大 

(ce) 对 固定 时 间 搜 查 的 策略 是 一 个 静态 策略 , 一 个 依赖 于 t 以 前 已 经 找到 的 失物 件数 并 允许 
在 每 个 t 决定 是 否 停止 的 动态 策略 是 否 有 利 ? 

提示 在 t 以 前 还 没有 找到 失物 的 个 数 的 分 布 怎样 依赖 在 此 前 已 经 找到 的 失物 个 数 ? 


75. 


76. 
77. 


78. 


“79. 


80. 


81. 


习 题 293 


假设 在 顾客 相继 到 达 一 个 单 服务 线 的 服务 站 之 间 的 时 间 是 独立 随机 变量 有 一 个 共同 的 分 
布 F. 假设 在 顾客 到 达 时 , 他 在 服务 线 有 空 时 立刻 进入 服务 或 者 在 服务 线 忙于 服务 另 一 个 
顾客 时 加 到 等 待 队列 的 末尾 . 在 服务 线 对 顾客 完成 工作 后 , 这 个 顾客 离开 系统 , 而 若 有 顾客 
等 候 , 下 一 个 顾客 就 进入 服务 . 以 Xn 记 在 第 n 个 顾客 到 达 后 系统 中 的 顾客 数 , 而 以 区 记 
在 第 n 个 顾客 离开 时 留 在 系统 中 的 顾客 数 . 顾客 的 服务 时 间 是 独立 的 随机 变量 (它们 也 与 
到 达 间 隔 时 间 独 立 ), 具有 共同 的 分 布 G. 1 

(a) 如 果 下 是 速率 为 和 的 指数 分 布 , 那么 {Xn}, {Yn} 中 有 马尔 可 夫 链 吗 ? 

(b) 如 果 G 是 速率 为 上 的 指数 分 布 , 那么 {Xn}, {Yn} 中 有 马尔 可 夫 链 吗 ? 

(e) 给 出 (a) 和 (b) 中 的 任意 的 马尔 可 夫 链 的 转移 概率 . 

对 例 5.27, 求 在 一 个 忙 期 接受 服务 的 顾客 数 的 均值 和 方差 . 

假设 顾客 以 速率 为 和 的 泊 松 过 程 到 达 一 个 服务 系统 . 这 个 系统 有 无 数 条 服务 线 , 因此 顾客 
一 到 就 开始 服务 . 到 达 者 的 服务 时 间 是 独立 的 速率 为 上 的 指数 随机 变量 , 而 且 与 到 达 过 程 
独立 , 当 顾客 的 服务 结束 时 他 们 就 离开 系统 . 令 N 是 第 一 个 离开 发 生前 到 达 者 的 人 数 . 

(a) 求 PIN=). 

(b) 求 P{N =2}. 

(@) 求 P{N = 分 . 

(d) 求 第 一 个 到 达 者 也 是 第 一 个 离开 的 概率 . 

(e) 求 第 一 个 离开 的 平均 时 间 . 

一 个 商店 在 上 午 8:00 开门 . 从 8:00 到 10:00 顾客 以 每 小 时 4 人 的 泊 松 速率 到 达 , 从 10:00 
到 12:00 顾客 以 每 小 时 8 人 的 泊 松 速率 到 达 . 从 12:00 到 下 午 2:00 到 达 率 稳定 地 从 12:00 
的 每 小 时 8 人 增加 到 2:00 的 每 小 时 10 人 . 而 在 下 午 2:00 到 5:00 到 达 率 稳定 地 从 2:00 的 
每 小 时 10 人 下 降 到 5:00 的 每 小 时 4 人 . 确定 在 给 定 的 一 天 进入 商店 的 顾客 数 的 分 布 . 
假设 事件 按 强度 函数 和 (t),t > 0 的 非 时 齐 泊 松 过 程 发 生 ， 再 假设 在 时 刻 s 发 生 的 事件 
是 类 型 1 事件 的 概率 为 p(s),s > 0. 车 Ni(t) 是 直至 t 发 生 的 类 型 1 事件 的 个 数 ， 问 
{Na(t),t > 0} 是 什么 类 型 的 过 程 ? 

以 Ti,T2,… 记 一 个 具有 强度 函数 和 A(t) 的 非 时 齐 泊 松 过 程 的 事件 到 达 间 隔 时 间 . 


(a) Ti 是 否 独立 ? 
(b) Ti 是 否 同 分 布 ? 
(c) 求 五 的 分 布 . 
(a) 令 {N(),t > 0} 是 一 个 具有 均值 函数 m(t) 的 非 时 齐 泊 松 过 程 . 给 定 N(t) = n, 证 明 
一 组 无 序 的 到 达 时 间 与 具有 分 布 函 数 为 
击 作 
F(z)= { a A 
zr>t 


的 n 个 独立 同 分 布 的 随机 变量 有 相同 的 分 布 . 

(b) 假设 工人 按 一 个 具有 均值 函数 m(t) 的 非 时 齐 泊 松 过 程 发 生 事故 . 又 假设 每 个 受伤 的 
人 以 一 个 具有 分 布 下 的 随机 的 时 间 离 开工 作 . 令 XX(t) 为 在 时 间 t 离开 工作 的 人 数 . 
利用 (a) 求 E[X(#)]. 
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82. 令 Xi, X2,…… 是 独立 的 正 值 连续 随机 变量 , 具有 共同 的 密度 函数 f, 并 且 假 设 这 个 序列 与 
一 个 均值 为 和 的 泊 松 随机 变量 N 独立 . 定义 


N(t) = 满足 i< N, Xi <t 的 i 的 个 数 . 


证 明 {N(b,t > 0} 是 一 个 以 A(t) = 和 f(t) 为 强度 函数 的 非 时 齐 的 泊 松 过 程 . 
83。 假设 {No(t),t > 0} 是 速率 和 = 1 的 泊 松 过 程 . 以 A(t) 记 t 的 一 个 非 负 函数 , 而 令 


ml(t) = | A(s)ds 


用 N(t) = No(m(t)) 定义 N(t). 论证 {N(t),t > 0} 是 一 个 具有 强度 函数 和 A(t)(t > 0) 的 
非 时 齐 泊 松 过 程 . 
提示 : 利用 恒等式 

m(t+h)—m(t) =m (th+o(h) 

“84. 令 XX1, XX2,… 是 具有 密度 函数 f(z) 的 独立 同 分 布 的 非 负 随 机 变 最 . 若 ,大 于 每 一 个 它 
以 前 的 值 XX,… ,Xn-1, 则 我 们 称 在 时 间 n 出 现 一 个 记录 (一 个 记录 自动 地 在 时 间 1 出 
现 ). 如 果 一 个 记录 在 时 间 n 出现, 那么 Xw 称 为 一 个 记录 值 . 换 句 话说 , 一 个 记录 值 出 现 ， 
只 要 达到 了 一 个 新 高 , 而 这 个 新 高 就 称 为 记录 值 ， 以 N(t) 记 小 于 或 等 于 t 的 记录 值 的 个 
数 . 描述 过 程 {N(t),t > 0}, 假定 
(a) / 是 一 个 任意 的 连续 密度 函数 ; 

(b) f(z) = Xe 
提示 : 完成 以 下 句子 : 如 果 大 于 t 的 首 个 Xi 在 … 之 间 , 则 存在 一 个 值 在 上 与 上 + dt 的 记 


录 人 
“部 基 保险 公司 在 寿险 项 目 上 按 每 周 速率 和 == 5 的 泊 松 过 程 支付 理赔 件数 如 果 每 保险 赔付 
金额 按 均值 为 $2000 指数 地 分 布 , 问 在 4 周 的 范围 中 , 保险 公司 赔付 金额 的 均值 与 方 关 是 
多 4 >? 
86. 在 好 的 年 度 ,暴风雨 按 每 单位 时 间 速率 3 的 泊 松 过 程 发 生 , 而 在 其 余年 度 , 按 每 单位 时 间 吉 
率 5 的 泊 松 过 程 发 生 , 假设 明年 是 好 的 年 度 的 概率 为 0.3. 以 N(t) 记 明 年 的 前 + 个 单位 时 
间 中 暴风 十 的 次 数 . 
(a) 求 P{N(D = 可- 
(b) {N(t),t > 0} 是 泊 松 过 程 吗 ? 
(c) {N(b),t > 0} 有 没有 平稳 增 量 ? 为 什么 ? 
(d) 它 有 没有 独立 增 量 ?为 什么 ? 
(e) 如 果 明 年 在 上 = 1 以 前 有 3 次 暴风 雨 , 这 是 一 个 好 的 年 度 的 条 件 概率 是 多 少 ? 
87. 当 {X(b),t > 0} 是 一 个 复合 泊 松 过 程 时 , 确定 


Cov(X(t), X(t+ s)) 


88. 顾客 按 每 小 时 12 人 的 速率 的 泊 松 过 程 到 达 一 个 自动 取款 机 . 每 次 交易 取款 的 金额 是 均值 
$30 和 标准 差 $50 的 随机 变量 ( 负 的 取款 是 存款 ). 每 天 用 取款 机 15 小 时 . 求全 天 取款 小 
于 $6000 的 近似 概率 . 
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89. 


90. 
“91. 


92. 
93. 


94. 


有 两 个 部 件 的 系统 的 某 些 部 件 在 受到 震动 后 失效 . 3 种 类 型 的 震动 独立 地 按 泊 松 过 程 到 达 . 
第 1 型 震动 按 泊 松 速率 和 1 到 达 , 并 且 引 起 第 一 个 部 件 失效 . 第 2 型 的 那些 震动 按 泊 松 速率 
》a 到 达 , 并 且 引 起 第 二 个 部 件 失效 . 第 3 型 震动 按 泊 松 速率 Xs 到 达 , 并 且 引 起 两 个 部 件 都 
失效 . 以 Xi 和 X2 记 两 个 部 件 的 生存 时 间 . 证 明 Xl 和 X2 的 联合 分 布 由 


P{X > s, X1 > t} =exp{— 和 Ms — Mt — Msmax(s,t)} 


给 出 , 这 个 分 布 就 是 著名 的 二 维 指数 分 布 . 

在 习题 89 中 , 证 明 Xi 和 X2 都 服从 指数 分 布 . 

令 XX1,X2,… ,Xn 是 独立 同 分 布 的 指数 随机 变量 ， 证 明 其 中 最 大 的 大 于 其 他 的 和 的 概率 
是 n/2"-!. 即 , 若 


M = max Xj 
了 


证 明 


n 
?fu> 完 x-u) = Fr 


11 

提示 , P{X1 > 并 "Xi} 是 多 少 ? 

证 明 方 程 (5.22). 

证 明 

(a) max(X1, X2) = Xi + X2 - min(Xa, X2). 而 一 般 地 ， 

(b) max(Xi，…,Xn) = DY Xi 一 23 min(Xi, X;) 
7 


+ DD min(Xi Xy, XA)+ + (1)" min(Xi, Xi,Xn) 
{ik 

(c) 通过 定义 合适 的 随机 变量 Xi(i = 1,…,n) 和 在 (b) 中 取 期 望 , 解释 如 何 得 到 著名 的 公 

式 

P(U? Ai) = 7,P(A4) — DEP(AA) + +(-1)" Pi An) 
5 

(d) 考虑 m 个 独立 的 泊 松 过 程 , 第 i 个 具有 速率 Xi. 推导 直到 n 个 过 程 中 有 一 个 事件 已 经 

发 生 的 平均 时 间 的 一 个 表达 式 . 
一 个 二 维 泊 松 过 程 是 一 个 在 平面 上 随机 发 生 的 事件 的 过 程 , 它 使 
(i) 对 于 面积 为 4 的 任何 区 域 , 在 这 个 区 域 中 的 事件 个 数 具 有 均值 为 A4 的 泊 松 分 布 . 
(ii) 在 不 相交 的 区 域 中 的 事件 的 个 数 是 独立 的 . 
对 于 这 样 的 过 程 , 考察 平面 中 的 一 个 任意 的 点 , 而 以 X 记 它 到 最 近 的 事件 的 距离 (其 中 距 
离 是 以 通常 的 欧 几 里 得 方式 测量 的 ). 证 明 
(a) P{X > =e- ~ 
(9) EX] = 二 
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95. 令 {NN(t),t > 0} 是 具有 随机 速率 二 的 条 件 泊 松 过 程 . 
(a) 推导 E[LIN(t) = n] 的 表达 式 . 
(b) 对 于 s > 求 EIN(s)IN(t) = 
(c) 对 于 s < 求 EIN(s)|IN(t) =n]. 

96. 对 于 条 件 泊 松 过 程 , 令 mi = EIL],m2 = EI[Z]， 对 于 s < t, 利用 mi,m2, 求 
Cov(N(s), N(t)). 

97. 考虑 一 个 条 件 泊 松 过 程 , 其 中 速率 工 像 例 5.29 中 那样 , 具有 参数 为 m 和 p 的 伽 马 密度 . 给 
定 N(t) =n, 求 工 的 条 件 密度 函数 . 

“98. 在 例 5.21 中 令 M(t) = E[D(t)] 


(a) 证 明 
M(t+h)= M(t)+e- "Mhp+ o(h) 
(b) 用 (a) 证 明 . 
M'(t) = Mue—™ 
(c) 证 明 


M(t) = 举 (1 一 6 
“99. 令 标志 值 分 布 为 下 的 埠 克 斯 过 程 的 首 个 和 第 二 个 事件 之 间 的 间隔 时 间 为 X. 求 P(X > 轨 . 


参考 文献 


[1] H. Cramér and M. Leadbetter, “Stationary and Related Stochastic Processes,” John 
Wiley, New York, 1966. 

[2] 5. Ross, “Stochastic Processes,” Second Edition, John Wiley, New York, 1996, 

[3] 5. Ross, “Probability Models for Computer Science,” Academic Press, 2002. 


第 6 章 ”连续 时 间 的 马尔 可 夫 链 


6.1 3 言 


本 章 我 们 考虑 一 类 在 现实 世界 中 有 广泛 应 用 的 概率 模型 , 这 类 中 的 成 员 是 第 4 
章 的 马尔 可 夫 链 的 连续 时 间 版 本 , 这 是 由 给 定 现在 的 状态 时 , 将 来 与 过 去 独立 的 马 
尔 可 夫 性 质 描 述 的 . 

连续 时 间 的 马尔 可 夫 链 的 例子 我 们 已 经 遇 到 过 , 就 是 第 5 章 中 的 泊 松 过 程 . 因 
为 如 果 我 们 令 直到 时 刻 t 为 止 的 到 达 总 数 ( 即 N(t)) 为 过 程 在 时 刻 t 的 状态 , 那么 
泊 松 过 程 是 一 个 具有 状态 0, 1,2,… 的 连续 时 间 的 马尔 可 夫 链 , 它 总 是 从 状态 n 进 
行 到 状态 n 十 1, 其 中 n > 0. 这 样 的 过 程 , 称 为 纯 生 过 程 , 由 于 当 一 个 转移 发 生 时 ， 
这 个 系统 的 状态 总 是 增加 1. 更 一 般 地 , 一 个 能 够 只 从 状态 n 进行 到 (在 一 次 转移 
中 ) 状态 n 一 1 或 者 状态 n 十 1 的 指数 模型, 称 为 生 灭 模型 , 对 于 这 样 的 模型 , 从 状 
态 到 状态 n+1 的 转移 被 设 定 为 生 , 而 从 状态 n 到 状态 n 一 1 的 转移 是 灭 . 生 灭 
模型 在 生物 系统 的 研究 中 有 广泛 的 应 用 , 而 在 排队 等 待 系统 的 研究 中 , 状态 表示 在 
系统 中 的 顾客 数 . 在 这 一 章 中 , 这 些 模型 将 得 到 广泛 的 研究 . 

在 6.2 节 中 , 我 们 定义 连续 时 间 的 马尔 可 夫 链 , 然后 , 将 它们 与 第 4 章 中 离散 时 
间 的 马尔 可 夫 链 相 联系 .在 6.3 节 中 , 我 们 研究 生 灭 过 程 , 而 在 6.4 节 中 , 我 们 推导 
两 组 微分 方程 ( 即 向 前 方程 与 向 后 方程 ), 它们 描述 了 系统 的 概率 规律 . 在 6.5 节 中 ， 
我 们 要 确定 联系 到 一 个 时 间 连 续 的 马尔 可 夫 链 的 极限 (或 长 程 ) 概率 . 在 6.6 节 中 ， 
我 们 考虑 时 间 可 逆 性 的 论题 . 我 们 证 明 一 切 生 灭 过 程 都 是 时 间 可 逆 的 , 然后 阐述 这 
种 观察 对 于 排队 系统 的 重要 性 . 6.7 节 讨论 倒 道 链 在 6.8 节 中 , 我 们 将 说 明 怎样 将 马 
尔 可 夫 链 均匀 化 , 这 项 技术 对 于 数值 计算 很 有 用 . 


6.2 ”连续 时 间 的 马尔 可 夫 链 


假设 我 们 有 一 个 取 值 于 非 负 整数 集合 的 连续 时 间 的 随机 过 程 {X(t),t > 0}. 与 
第 4 章 中 给 出 的 离散 时 间 的 马尔 可 夫 链 的 定义 相似 , 我 们 说 过 程 {X(t),t > 0} 是 连 
续 时 间 的 马尔 可 夫 链 , 如 果 对 于 一 切 s,t > 0 和 非 负 整 数 i,j,z(w),0<wu<s 有 
P{X(t+s)=j|X(s) =i, X(u) =z(u),0 <u<s}=P{X(t+s) =j|X(s) =} 
换 句 话说 , 连续 时 间 的 马尔 可 夫 链 是 具有 马尔 可 夫 性 质 的 随机 过 程 ， 即 给 定 现在 
X(s) 和 过 去 X(u),0 < u < s, 将 来 X(t 十 s) 的 条 件 分 布 只 依赖 现在 并 独立 于 过 
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去 . 此 外 , 如 果 
P{X(t+s)= jlX(s) = 
独立 于 s, 那么 这 个 连续 时 间 的 马尔 可 夫 链 , 称 为 具有 平稳 的 或 者 时 齐 的 转移 概率 . 
在 本 书 中 考虑 的 所 有 的 马尔 可 夫 链 都 假定 具有 平稳 的 转移 概率 . 
假设 一 个 连续 时 间 的 马尔 可 夫 链 在 某 个 时 刻 进 入 状态 i, 例如 , 在 时 刻 0, 并 且 
假设 在 随后 的 10 分 钟 过 程 不 离开 i( 即 没有 发 生 转 移 ). 在 随后 的 5 分 钟 , 该 过 程 不 
离开 状态 i 的 概率 是 多 少 ? 现在 , 由 于 过 程 在 时 刻 10 处 于 状态 i, 由 马尔 可 夫 性 质 
推出 , 在 时 间 区 间 [10, 15] 过 程 保持 在 这 个 状态 的 概率 正 是 它 在 状态 i 至少 保持 5 
分 钟 的 (无 条 件 ) 概率 . 即 如 果 我 们 以 T; 记 在 转移 到 一 个 不 同 的 状态 以 前 , 过 程 在 
状态 i 停留 的 时 间 , 那么 
P{ > 15|T; > 10} = P{T: > 5} 
或 者 , 一 般 地 , 由 同样 的 推理 , 对 一 切 st > 0， 
P{Ti > s+tlTi > s} =P{T: >t} 


因此 , 这 个 随机 时 间 T; 是 无 记忆 的 , 而 必须 是 指数 地 分 布 的 (参见 5.2.2 节 ). 

事实 上 , 上 面 的 事实 给 了 我 们 定义 连续 时 间 的 马尔 可 夫 链 的 另 一 个 途径 . 即 它 
是 一 个 具有 以 下 性 质 的 随机 过 程 : 每 次 进入 状态 i 时 有 

(i) 在 转移 到 不 同 的 状态 前 , 它 处 在 这 个 状态 的 时 间 是 均值 为 1/vi 的 指数 随机 
变 二 ; 

(ii) 当 过 程 离开 状态 i 时 , 以 某 个 概率 Pi; 进入 下 一 个 状态 j, 当然 Pj; 必须 满 
足 

Pi = 0， 对 于 一 切 i Dj Ps =1， 对 于 一 切 i 
j 


换 句 话说 , 连续 时 间 的 马尔 可 夫 链 是 一 个 随机 过 程 , 它 按 一 个 (离散 的 ) 马尔 可 夫 链 
从 状态 运动 到 状态 , 但 是 在 进入 下 一 个 状态 前 , 停留 在 每 个 状态 的 时 间 是 按 指数 分 
布 的 . 此 外 , 过 程 停留 在 状态 i 的 时 间 和 下 一 个 访问 的 状态 必须 是 独立 的 随机 变革 . 
因为 如 果 下 一 个 访问 的 状态 依赖 Ti, 那么 过 程 已 经 在 状态 i 停留 多 久 的 信息 将 影响 
下 一 个 状态 的 预报 , 而 这 与 马尔 可 夫 性 假定 矛盾 . 
例 6.1( 一 个 擦 鞋 店 ) 考察 具有 两 张 工作 椅 (椅子 1 和 椅子 2) 的 擦 鞋 店 . 到 达 的 顾 
客 先 去 椅子 1, 鞋 被 清洁 并 擦 亮 . 完成 后 再 去 椅子 2, 鞋 用 软 材料 上 光 . 两 个 椅子 的 
服务 时 间 假定 是 独立 的 随机 变量 , 分 别 以 速率 ja 与 ja 指数 地 分 布 . 假设 潜在 的 顾 
客 按 速率 A 的 泊 松 过 程 到 达 , 并 且 潜 在 的 顾客 只 在 两 个 椅子 都 空 时 才 进 店 . 

以 上 的 模型 可 以 用 一 个 连续 时 间 的 马尔 可 夫 链 来 分 析 , 但 是 , 我 们 首先 必须 确 
定 合 适 的 状态 空间 . 因为 潜在 的 顾客 只 在 没有 其 他 顾客 时 才 进 店 , 由 此 推出 店 中 总 
是 有 0 个 或 者 1 个 顾客 . 可 是 , 若 有 1 个 顾客 在 店 中 , 则 我 们 也 需要 知道 他 现在 正 
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在 哪 张 椅子 上 . 因此 , 一 个 合适 的 状态 空间 可 以 由 0,1 和 2 三 个 状态 组 成 , 其 中 的 状 


态 有 以 下 解释 : 
状态 解释 

0 店 是 空 的 

1 一 个 顾客 在 椅子 1 上 

2 一 个 顾客 在 椅子 2 上 y 
我 们 将 它 留 给 你 作为 习题 验证 

vo=N, t= w= Pn=P2=Po=1 
6.3 生 灭 过 程 


考虑 一 个 系统 , 在 任意 时 间 它 的 状态 用 这 个 时 间 在 系统 中 的 人 数 表示 . 假设 只 
要 系统 中 有 n 个 人 , 则 (i) 新 到 达 者 以 指数 速率 和 进入 系统 , 而 (i 人 们 以 指数 
速率 jn 离开 系统 . 即 只 要 系统 中 有 n 个 人 , 则 直到 下 一 个 到 达 的 时 间 是 按 均值 为 
1/Xn 指数 地 分 布 的 , 而 且 独 立 于 直到 下 一 个 离开 的 时 间 , 后 者 是 按 均 值 为 1/1n 指 
数 地 分 布 的 . 这 样 的 系统 称 为 生 灭 过 程 . 参数 {Xn} 沁 o。 和 {jn} 窟 1 分 别称 为 到 达 (或 
出 生 ) 和 离开 (或 灭亡 ) 的 速率 

于 是 , 生 灭 过 程 是 具有 状态 {0, 1,…} 的 连续 时 间 的 马尔 可 夫 链 , 它 从 状态 n 只 
能 转移 到 状态 n 一 1 或 者 状态 mn + 1l, 生 灭 率 和 状态 转移 率 与 概率 的 关系 是 


vo = X0， 
Wi=N+h, i>0 
P=1 
Ra =+ i>0 
i + pi 
Pi yt i>0 
i 


这 是 因为 车 在 系统 中 有 i 个 人 , 如 果 生 发 生 于 灭 之 前 , 则 下 一 个 状态 将 是 i+ 1, 而 
速率 为 Xi 的 指数 随机 变 基 早 于 一 个 (独立 的 ) 速率 为 yw; 的 指数 随机 变量 发 生 的 概 
率 是 和 /( 和 i 十 Ji). 再 者 , 直到 一 个 出 生 或 一 个 灭亡 发 生 的 时 间 是 速率 为 Xi + Ma 的 
指数 分 布 (从 而 vi = 入 十 p45). 
例 6.2( 泊 松 过 程 ) 考虑 一 个 生 灭 过 程 , 它 有 

如 =0， 对 于 一 切 n>1 

和 n= 和 对 于 一 切 n>0 
这 是 一 个 绝 不 发 生 离 开 的 过 程 , 而 相继 的 到 达 之 间 的 时 间 是 均值 为 1/ 入 i 
变量 . 因此 , 这 就 是 泊 松 过 程 . 
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一 个 对 于 一 切 n 都 有 jn = 0 的 生 灭 过 程 称 为 纯 生 过 程 . 另 一 个 纯 生 过 程 由 下 
面 的 例子 给 出 . 
例 6.3( 有 线性 出 生 率 的 纯 生 过 程 ) 考虑 一 个 总 体 , 它 的 成 员 可 以 产生 新 的 成 员 , 但 
是 不 会 死亡 如果 每 个 成 员 都 独立 于 其 他 成 员 行动 ,而 以 均值 为 1/ 的 指数 时 间 
产生 新 成 员 , 那么 , 如 果 在 时 刻 t 总 体 的 大 小 是 X(t), 那么 {X(t),t > 0} 是 和 n= 
nA(n > 0) 的 纯 生 过 程 . 这 是 因为 车 总 体 由 个 成 员 组 成 而 每 个 以 指数 速率 和 出 生 ， 
则 出 生发 生 的 总 速率 是 nA. 纯 生 过 程 通常 称 为 尤 尔 过 程 , G. 尤 尔 曾 将 它 应 用 到 进 
化 的 数学 理论 中 , 故而 以 他 的 名 字 命 名 . 国 
例 6.4( 移 民 的 线性 增长 模型 ) 一 个 
n=npy, n>1 
Mn=nA+0, n>0 
的 模型 称 为 移民 的 线性 增长 模型 . 这 种 过 程 自然 地 出 现在 生物 繁殖 和 群体 增长 的 研 
究 中 . 总 体 中 的 每 个 个 体 假定 以 指数 速率 和 出 生 . 此 外 , 存在 一 个 总 体 的 指数 增加 
率 0, 这 是 由 外 来 的 移民 所 引起 . 因此 , 有 n 个 成 员 的 系统 的 总 的 出 生 率 是 n 和 + 9. 
假定 总 体 的 每 个 成 员 的 死亡 以 指数 速率 / 发 生 , 所 以 jn = ny 
以 X(t) 记 在 时 刻 t 总 体 的 大 小 . 假设 X(0) = i, 并 且 令 
M(t) = E[X(t)] 
我 们 通过 推导 及 求解 它 满足 的 一 个 微分 方程 来 确定 M(t). 
我 们 先 通过 取 条 件 于 X(t) 推导 M(t 十 h) 的 一 个 方程 . 它 导出 


M(t+h) = EX(t+h)] = E[E[X(t+ A)IX()]] 


现在 , 给 定 在 时 刻 t 总 体 的 大 小 , 然后 忽略 概率 为 o(h) 的 事件 , 在 时 刻 t+h 总 体 增 
加 1, 如 果 在 (t,t+h) 中 有 一 个 出 生 或 一 个 移民 发 生 ; 或 者 减少 1, 如 果 在 这 个 区 间 
有 一 个 死亡 ; 或 者 当 这 两 种 可 能 性 都 没有 出 现时 保持 不 变 . 即 给 定 X(t)， 


X(t) 十 1， 以 概率 [8 十 XGA 二 oo) 


X(t+hh) = 二 X(t) 一 1， 以 概率 X(t)jh + o(h) 
1 (| xX), 以 概率 1 一 [0 十 X(t) 和 十 X(t)uJh + o(h) 
所 以 
E[X(t+ h)|X(t)] = X(t) +[0+ X(t)A— X(t)nh + o(h) 
取 期 望 得 
M(t+h)= M(t) + (A— pM(Eh+ Oh+o(h) 
或 者 , 等 价 地 


Mt -MO Md +0+ 
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当 hh 一 0 时 取 极 限 得 微分 方程 
Mt) =nM(t) +0 (6.1) 


如 果 我 们 现在 定义 函数 h(t) 为 
hb = — WM) +0 
那么 
iD = A— WM'(t) 
所 以 , 微分 方程 (6.1) 可 以 写 为 


ht) _ Wt) _ 
RE 或 WM = 
求 积 分 得 
In[h(t)] = (入 一 At 十 c 
从 而 


h(t) = 天 e( 一 At 
将 h(t) 的 定义 代 回 上 式 给 出 
0+(A— nM(t) = 天 et 
为 了 确定 常数 K 的 值 , 注意 到 M(0) =i, 并 给 上 式 在 上 = 0 赋值 . 这 样 给 出 
b+( 和 一 /有 = 天 
代入 上 面 M(t) 的 方程 , 得 到 M(t) 的 如 下 的 解 


MO= 二 rd 一 卫士 ieC -人 
注意 我 们 隐 性 地 假定 了 入 人 如 果 和 = jp, 那么 微分 方程 (6.1) 简化 为 
M'(t)=0 (6.2) 
对 (6.2) 求 积分 , 并 且 利用 M(0) =i, 给 出 解 
M(t) =0t+i 


例 6.5( 排 队 系 统 M/M/1) 假设 顾客 按 速率 和 的 泊 松 过 程 到 达 一 个 单 服务 线 的 服 
务 站 . 即 相继 到 达 之 间 的 时 间 是 均值 为 1/ 和 的 独立 指数 随机 变量 . 每 个 顾客 在 到 达 
时 如 果 服 务 线 有 空 , 就 直接 进入 服务 ; 如 果 没 有 空 , 那么 顾客 加 入 排队 ( 即 在 队列 等 
待 ) 当 服务 线 结束 了 一 个 顾客 的 服务 , 这 个 顾客 离开 这 个 系统 , 而 队列 中 如 果 有 人 
等 待 , 则 下 一 个 顾客 进入 服务 . 相继 的 服务 时 间 假定 是 均值 为 1/4 的 独立 指数 随机 
变 基 . 

以 上 的 是 通常 所 说 的 M/M/1 排队 系统 . 第 一 个 M 表示 到 达 间 隔 过 程 是 马尔 
可 夫 的 (因为 是 泊 松 过 程 ), 而 第 二 个 M 表示 服务 时 间 的 分 布 是 指数 的 (因此 是 马尔 
可 夫 的 ). 数字 1 表示 有 一 个 单 服务 线 . 
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如 果 我 们 以 X(t) 记 在 时 刻 t 系统 中 的 顾客 数 , 则 {X(t),t > 0} 是 
n=p, n>1 
Mn=A, n>0 
的 生 灭 过 程 . 
例 6.6( 多 服务 线 的 指数 排队 系统 ) 考虑 具有 s 条 服务 线 的 指数 排队 系统 , 每 条 服 
务 线 以 速率 / 工作 . 顾客 按 速 率 ^ 的 泊 松 过 程 到 达 . 一 个 进入 的 顾客 先 在 队列 等 
待 , 然后 走向 首 条 空 着 的 服务 线 . 这 是 一 个 参数 为 
nu, ls<ngs 
An=A, 72>0 
的 生 灭 过 程 , 弄 清楚 为 什么 正确 的 推理 如 下 , 若 有 n 个 顾客 进入 系统 , 其 中 n < s， 
则 n 条 服务 线 忙 着 . 因为 每 条 服务 线 以 速率 /工作 , 总 的 离开 速率 将 是 nu. 另 一 方 
面 , 若 有 mn 个 顾客 进入 系统 , 其 中 n > s, 则 所 有 的 s 条 服务 线 都 忙 着 , 因此 总 的 离 
开 速率 将 是 sp. 这 是 大 家 知道 的 M/M/s 排队 模型. mn 
现在 考虑 具有 出 生 率 {An} 与 死亡 率 {/in} 的 一 般 的 生 灭 过 程 , 其 中 jo = 0, 以 
Ti; 记 开始 处 在 状态 i 的 过 程 进入 状态 i+ 1(i > 0) 的 时 间 . 我 们 从 i = 0 开始 递 推 
地 计算 E[Z],z > 0. 由 于 To 是 速率 为 Xo 的 指数 随机 变 基 , 所 以 有 
Elmj = 这 


对 于 i > 0, 我 们 取 条 件 于 首次 使 过 程 到 达 i 一 1 或 i+1 的 转移 , 即 令 
1-{ 1， ”首次 转移 从 i 到 i+1 
0， ”首次 转移 从 i 到 i 一 1 
注意 
ET =1]= 


， ERIE=0= 


二 et E[Ti-1] + E[T] (6.3) 


这 个 事实 是 由 于 独立 于 第 一 次 是 从 生还 是 死 出 发 的 转移 , 直到 它 发 生 转移 的 时 间 是 
速率 为 和 i+ 的 指数 随机 变 基 . 现在 如 果 首次 转移 是 一 个 生 , 那么 总 体 大 小 是 i+1， 
所 以 不 需要 附加 时 间 ; 然而 , 如 果 它 是 一 个 死 , 那么 总 体 大 小 变 成 i 一 1, 转移 到 i+ 1 
需要 的 附加 时 间 等 于 它 回 到 i 的 时 间 (有 均值 E[Ti-i]) 加 上 它 到 达 i+1 的 附加 时 
间 (有 均值 E[Zi]). 因此 , 由 于 首次 转移 是 一 个 生 的 概率 为 和 /( 和 i 十 pi), 我 们 有 


Bn) = Ht + i (Stn + EL) 


或 者 , 等 价 地 
EIr] = 这 + 和 ElIF-i，i>1 
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从 了 ITb] = 1/Xo 开始 , 上 面 的 关系 导出 相继 地 计算 E[T],E[T], … 的 有 效 方法 . 
现在 假设 我 们 要 确定 从 状态 i 到 状态 j(i < j) 的 平均 时 间 . 这 可 以 由 上 式 给 出 

其 中 要 注意 这 个 量 等 于 E[T] + ElTin] 十 … 十 BEIT]. 

例 6.7 对 于 具有 参数 入 三 和 与 ji 三 4 的 生 灭 过 程 ， 


BIT = +hEm = H+uEn) 
由 E[Tb] = 1/A 开始 , 我 们 得 到 
Blnl= 3(1+4), 
机 = + 和 
一 般 地 
a ed a 


于 是 从 状态 k(k < j) 开始 , 到 达 状 态 j 的 平均 时 间 是 


了 CA [一 (OAA7 
E[ 从 大 到 7 的 时 间 ] = 把 em- rr 


上 面 假定 了 入 去 4. 如果 入 =, 那么 
IT] = 号, BI 从 上 到 jj 的 时 间 | = 


ee 0 到 i+1 A 首先 注意 方程 
(6.3) 可 以 写成 


+ ty. a 


EITiI1] = 


Ti + 0 DCE) + Bn) 


于 是 

Var(EITi]) = (EITi-1] + ELTI)?Var(h) = (PIT 二 Bin ys (64) 
其 中 Var() 的 表达 式 得 自 到 是 参数 为 p = 和 i/( 和 i + 4) 的 伯 努 利 随机 变量 .此 外 
注意 , 若 我 们 以 Xi; 记 直 至 从 i 发生 转移 的 时 间 , 那么 


Var = 1) = Var(Xill; =1) = Var(X;) = 二 (6.5) 
其 中 上 式 用 了 直至 转移 发 生 的 时 间 独 立 于 下 一 个 访问 的 状态 这 个 事实 . 此 外 
Var(Ti|Ii = 0)= Var(Xi 十 回 到 i 的 时 间 十 然后 到 达 i+1 的 时 间 ) (6.6) 


= Var(Xi) + Var(Ti_1) + Var(T:) 
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其 中 上 式 用 了 三 个 随机 变量 是 独立 的 事实 . 我 们 可 以 将 方程 (6.5) 与 (6.6) 改写 为 
Var(TilFi) = Var(Xi) + (1 — Fi)[Var(Ti-1) + Var(T)] 
所 以 


ElVar(TIL)] = —E [Var(Ti-1) + Var (6.7) 


. 
Wt 全 和 
因此 , 利用 条 件 方差 公式 , 它 说 明 Var(T;) 是 方程 (6.7) 和 (6.4) 的 和 , 我 们 得 到 


1 HA 
Var = [++ 痪 Var(Ti) + Var(T)] + my (ET) + ET) 
或 者 , 等 价 地 

Var(T) = RE 十 A Var(Ti_1) + pn En- + ET) 


由 Var(Tb) = 1/X3 以 及 利用 前 面 的 递 推 关 系 得 到 期 望 的 公式 , 我 们 可 以 递 推 地 计算 
Var(Ti), 此 外 , 若 我 们 需要 从 状态 上 出 发 到 达 状 态 j(k < j) 的 时 间 的 方差 , 则 它 可 
以 表示 为 从 大 到 大 十 1 的 时 间 加 上 从 大 +1 到 大 十 2 的 附加 时 间 , 如 此 等 等 . 因为 由 
马尔 可 夫 性 质 这 些 相继 的 随机 变 基 是 独立 的 , 由 此 推出 


ee 
Var( 从 大 到 了 的 时 间 ) = 》 Var(T) 


imk 


6.4 ”转移 概率 函数 P(t) 
以 
Pi(t) =P{X(t+s)= jlX(s) = 
记 现 在 处 在 状态 i 的 过 程 在 时 间 上 后 处 在 状态 j 的 概率 . 这 些 量 常 称 为 连续 时 间 马 
尔 可 夫 链 的 转移 概率 . 

在 有 不 同 的 出 生 率 的 纯 生 过 程 的 情形 , 我 们 可 以 显 式 确定 Pi(t). 对 于 这 样 的 
过 程 , 以 Xk 记 在 转移 到 状态 十 1(k > 1) 以 前 过 程 在 状态 停留 的 时 间 , 假设 过 
程 现在 处 于 状态 i, 令 j > i. 那么, 因为 X; 是 在 转移 到 状态 ;+ 1 以 前 过 程 在 状态 i 
停留 的 时 间 , 而 Xi+i 是 在 转移 到 状态 ;十 2 以 前 过 程 在 状态 i 十 1 停留 的 时 间 , 如 此 
等 等 , 由 此 推出 沁 汪 ! Xi 是 进入 状态 j 所 用 的 时 间 . 现在 , 如 果 过 程 直到 时 间 t 为 
止 还 没有 进入 状态 j, 则 它 在 时 间 上 的 状态 小 于 j, 而 反之 亦 然 . 即 

X(t) <j 人 Xi+.…+ Xi-1>t 
所 以 , 对 于 i < j, 对 于 纯 生 过 程 有 


—1 
P{X(t) <jlX(0) =i} =P 志 区 4 


k=i 
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然而 , 由 于 Xi,…,X;-1 是 分 别 以 和 i,…, 和 -1 为 速率 的 独立 的 指数 随机 变量 . 从 上 
面 的 事实 以 及 给 出 一; Xk 的 尾 分 布 的 方程 (5.9), 我 们 得 到 


了 -1 法 1 人 A 

P{X(t) <jlX(0)=i} = De™: II F 二 

ki zk r=i “大 

在 上 式 中 用 7 了 +1 代替 了 给 出 4 

j i 
P{X(O <j+1X(0)=0=De™ I ~ 2 
ki Ts ri 一 “不 
由 于 


P{X(t) =jIX(0)=i} =P{X(t) <j+1|X(0)=i} —P{X(t) < jlX(0) = 
以 及 因为 Pi(t) = P{Xi > 甘 = et 所 以 我 们 已 经 证 明了 下 面 的 命题 . 
命题 6.1 对 于 当头] 时 Ai 头 Ai 的 纯 生 过 程 有 
入 


了 j a i 
误 一 ANkt = 一 Xkt rr i 
mo=Zew II TT si 


r#kr=i rr k= 天 kr 一 


及 的 =e 


例 6.8 ”考虑 尤 尔 过 程 , 它 是 一 个 纯 生 过 程 , 其 中 总 体 中 的 每 个 个 体 独立 地 给 出 出 
生 率 X 从 而 xs = nm >1. 令 i= 1 由 命题 6.1 得 到 


k=1 r#k,r=1 k=1 r#kr=1 
AN I Tr ; AE IT r J 
= €-i t 十 ee we 
r=1" 7) kl i re 
a 4 
=eiN(-1} -1+ Fem (去 一 
el 一 rkrelT 一 
现在 
大 五 r+ G-)! -1 
jh rk (1—k)(2—k)..(k—1—k)Gi— kl 大 一 1 
所 以 


” S 党 一 二 -At kl eX iMt(_1)i = e—M(] _e—Mt)i-1l 
P= D1) ey S13 Vey =e Xe sy 


于 是 从 单个 体 开始 , 在 时 间 t 总 体 的 大 小 是 均值 为 eX 的 几何 分 布 . 如 果 总 体 开始 
有 i 个 个 体 , 那么 我 们 可 以 将 每 个 个 体 看 成 从 它 自己 的 独立 的 尤 尔 过 程 开始 , 所 以 
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在 时 间 t 总 体 是 i 个 参数 为 eX 的 独立 同 分 布 的 几何 随机 变 基 的 和 . 但 这 意味 着 . 
对 给 定 的 X(0) =i, X(t) 的 条 件 分 布 类 似 于 , 抛掷 一 枚 每 次 正面 朝 上 的 概率 为 e 六 
的 硬币 , 要 收集 到 总 共有 i 个 正面 时 所 必须 抛 擅 的 次 数 的 分 布 . 因此 , 在 时 间 t 总 体 
的 大 小 有 一 个 参数 为 i 和 e-X 的 负 二 项 分 布 , 从 而 


Pi(t) = (eea eM, 了 >i>1 

(当然 , 我 们 可 以 用 命题 6.1 直接 得 到 Pitt) 的 方程 , 而 不 只 是 得 到 Pij(t). 但 是 , 需 
要 用 来 证 明 最 终 的 表达 式 与 前 面 的 结果 等 价 的 代数 推演 已 在 某 种 程度 上 论 及 .) 加 

我 们 现在 将 推导 一 般 的 连续 时 间 的 马尔 可 夫 链 的 转移 概率 Pi tt) 满足 的 一 组 
微分 方程 . 然而 , 我 们 首先 需要 一 个 定义 以 及 一 对 引 理 . 

对 于 一 对 记 j, 令 

qi = viPiy 

由 于 wi 是 过 程 处 于 状态 i 时 的 转移 速率 , 而 Pi 是 这 个 转移 为 到 状态 7 的 概率 , 由 
此 推出 qi 是 过 程 处 于 状态 i 时 转移 到 状态 j 的 速率 . 最 gij 称 为 卫 时 转移 率 . 由 于 


Vi= DviPs = Da 
了 了 


以 及 

已 二 周二 条 

的 2 9 
由 此 推出 特定 的 瞬时 转移 率 确定 了 连续 时 间 的 马尔 可 夫 链 的 参数 . 
引 理 6.2 


(limn-o SS = 时. 


证 明 首先 注意 , 由 于 直至 发 生 一 个 转移 的 时 间 是 指数 分 布 的 , 由 此 推出 在 时 间 hh 
中 有 两 次 或 两 次 以 上 转移 的 概率 是 o(h). 于 是 , 过 程 在 时 间 0 处 于 状态 i 而 在 时 间 
h 不 在 状态 i 的 概率 1 一 Pi(h) 等 于 在 时 间 h 内 发 生 一 次 转移 的 概率 加 上 关于 的 
基 个 无 穷 小 基 . 于 是 
1— Pi(h) = vih + o(h) 

这 就 证 明了 (a). 关于 (b) 的 证 明 , 注意 过 程 在 时 间 h 内 由 状态 i 转移 到 状态 j 的 概 
率 Pi(h) 等 于 在 这 段 时 间 中 发 生 一 个 转移 的 概率 乘 以 这 个 转移 是 到 状态 j 的 概率 ， 
并 加 上 关于 的 某 个 无 穷 小 基 . 即 


Pi(h) = hviPi; + o(h) 
这 就 证 明了 (b). mn 
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引 理 6.3 对 于 一 切 s>0,t>0 
Pi(t+s)= > Pir(t) Pry(s) (6.8) 
k=0 


证 明 ”为 了 过 程 在 时 间 t+ s 中 从 状态 i 达到 状态 j, 它 必 须 在 时 间 上 处 于 某 处 , 故 
而 
Pi(t+s)=P{X(t+s)=jIX(0)=} 
= D3 P{X(t+s)=j,X(t) = kX(0) = 
k=0 
= DP{X(t+s) =jX(t) =k,X(0) =i}:P{X(t) = kX(0) = 
k=0 


= DP{X(t+s)=jIX(t) =k}.P{X(t) =kIX(0) =} 
k=0 

= DPey(s)Pi(t) 
k=0 


这 就 完成 了 证 明 . 四 
(6.8) 这 组 方程 是 大 家 知道 的 C-K 方程. 由 引 理 6.3, 我 们 得 到 
Py(h+t)— Pis(t)= D) Pin(h) Pelt) — Pi(t) 
k=0 
= Pan(h)Pes(t) — [1 — Pi(h)]Ps(t) 


人 天 


从 而 


hh 一 0 hi 1 儿 h 


jn -加 全 mp0 - [Pu] mo) 
现在 假定 我 们 可 以 将 上 式 中 的 极限 与 求 和 交换 次 序 , 并 且 应 用 引 理 6.2, 我 们 得 到 
Pi(t) = > qinPes(t) — viPi(t) 
大 
这 个 次 序 的 交换 事实 上 是 可 以 验证 的 , 因此 , 有 下 述 定理 . 
定理 6.1( 科 尔 莫 戈 罗 夫 向 后 方程 ) 对 于 一 切 状态 i,j 和 时 间 t > 0， 


Pi(t) = >》 qinPes(t) — viPi(t) 
kA 


例 6.9 ”对 于 纯 生 过 程 , 向 后 方程 变 成 
P(t) = NPiris(t) — NPs(t) 
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例 6.10 ”对 于 生 灭 过 程 , 向 后 方程 变 成 
Pj;(t) = MP1;(t) — No Poj(t), 


PW = Otp) [Br + Ru 的 -Ce+mPia>o 
或 者 ,等 价 地 
Pl = [Ps 的 -本 二， (69) 


PE(t) = NPiHns(t) + piP1i(t) — Ntp)Py(t), i>0 国 
例 6.11( 由 两 个 状态 组 成 的 连续 时 间 的 马尔 可 夫 链 ) 考察 一 个 在 失效 前 按 均值 为 
1/A 的 指数 时 间 工 作 的 机 器 , 并 且 假 设 要 用 均值 为 1/4 的 指数 时 刻 修复 这 个 机 器 . 
如 果 机 器 在 时 刻 0 时 它 在 工作 , 那么 在 时 刻 t= 10 时 它 还 在 工作 的 概率 是 多 少 ? 
为 了 回答 这 样 一 个 问题 , 注意 这 个 过 程 是 生 灭 过 程 (以 状态 0 表示 机 器 在 工作 ， 
而 以 状态 1 表示 机 器 在 修理 ), 具有 参数 
N=N, =p N=0, i#0, p=0, iz#1 
我 们 将 通过 求解 在 例 6.10 中 给 出 的 一 组 微分 方程 来 推导 需求 的 这 个 概率 , 即 Poo(10). 


由 方程 (6.9), 我 们 得 到 
Poolt) = A[Pio(t) — Poo(t)], (6.10) 


Plo(t) = uPoo(t) — pPio(t) (6.11) 

将 方程 (6.10) 乘 以 几 并 将 方程 (6.11) 乘 以 入 , 然后 将 两 个 方程 相 加 , 导出 

APoolt) + APIlolt) = 0 
通过 求 积 分 , 我 们 得 到 

APoolt) + APiolt) = ¢ 
可 是 , 因为 Poo(0) = 1, Pio(0) = 0, 所 以 c= 所 以 

ApPoolt) + APio(t) = (6.12) 
或 者 , 等 价 地 

APiolt) = pll — Poolt)] 
通过 将 这 个 结果 代入 方程 (6.10), 我 们 得 到 

Peolt) = pl1 — Poo(t)] — APoolt) = p— (p+ NPoolt) 

令 


h(O) = Po 的 一 


我 们 有 


WO = (ut [nO + | = (+ nl) 
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从 而 i 
A = 一 +A) 
通过 两 边 求 积分 , 我 们 得 到 
InhGb = 一 (+Ai+e 或 h(t) = KerOtA6 
从 而 
Poolt) = 天 e-w+At 十 人 
通过 置 t= 0 并 利用 事实 Poo(0) = 1, 最 终 得 到 


入 k 
(p+X)t 
人 十 对 出 A+ 和 A 


Poolt) = 


从 方程 (6.12), 它 也 蕴涵 
I __ 人 se-(p+At 
HA 十 入 用 十 入 
因此 我 们 所 要 求 的 概率 Poo(10) 等 于 
入 
人 十 


Piolt) = 


Poo(10) = 


—10(u+ 和 A) [4 
py i 


也 可 以 推导 不 同 于 向 后 方程 的 另 一 组 微分 方程 . 这 组 方程 是 著名 的 科 尔 英 基 罗 
夫 向 前 方程 , 其 推导 如 下 . 从 C-K 方程 ( 引 理 6.3) 我 们 有 


Pi(t+h) — Ps(t)= D Pin(t)Pis(h) — Pi(t) 
k=0 


= Pr(t)Pis(h) — [1 — Pi;(h)]Pis(t) 
Kk#j 
于 是 
jn me- Emo - 己 &w] no] 


一 0 


如 果 假 定 可 以 交换 极限 与 求 和 , 从 引 理 6.2 就 得 到 


矶 的 = DansPir(t) — viPi(t) 
kA 
不 幸 的 是 , 我 们 并 不 总 能 验证 极限 与 求 和 的 次 序 可 交换 , 因此 , 上 式 并 不 总 是 成 立 
的 . 然而 , 它们 在 多 数 模型 中 成 立 , 这 些 模型 包括 生 灭 过程 和 一 切 有 限 状态 模型 . 这 
样 我 们 有 如 下 的 定理 . 
定理 6.2( 科 尔 莫 戈 罗 夫 向 前 方程 ) 在 合适 的 正则 条 件 下 ， 
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P(t) = YqrsPix(t) — viPs(t) (6.13) 
kz 


现在 我 们 对 于 纯 生 过 程 求解 向 前 方程 . 对 于 这 种 过 程 , 方程 (6.13) 简化 为 
P(t) = N-1P,j-i(t) — NPi(t) 
然而 , 注意 到 只 要 j < i 就 有 Pij(t) = 0( 因 为 没有 死亡 发 生 ), 我 们 可 以 重 写 上 述 方 
程 得 到 
Pilt) = —NPalt), P(t) = NiPsi(t) -NPslt) j2itl (6.14) 
命题 6.4 ”对 于 纯 生 过 程 ， 
Pult) =e-xt i>0 
Pi(t) = We etas 了 21i+1 
证 明 ”从 方程 (6.14) 通过 求 积分 以 及 利用 Pii(0) = 1, 得 到 Pi(t) = er 而 对 
Pij(lt) 的 对 应 结果 的 证 明 , 我 们 注意 由 方程 (6.14) 可 得 到 
et[PO 人 十 APG 一 evweN-1Pv-i(b) 


也 就 是 4 
Ele Pt] = N-1eVtP,j1lt) 
因此 , 由 于 Pi;(0) = 0, 我 们 得 到 所 要 的 结果 . 图 
例 6.12( 生 灭 过 程 的 向 前 方程 ) 对 于 一 般 的 生 灭 过 程 的 向 前 方程 (6.13) 是 
Phlt) = 5 qroPix(t) — MoPio(t) = p1Palt) — MoPio(t) (6.15) 
k#0 
Pi(t) = ok 一 (十 万) 有 的 (6.16) 
Kk#7 
= N-1Pij-i(t) + pyriPisnilt) — (N+ p53)Pi;(t) 图 


1 6.5 极限 概率 


与 离散 时 间 的 马尔 可 夫 链 的 一 个 基本 结果 类 似 , 连续 时 间 的 马尔 可 夫 链 在 时 刻 
+ 处 在 状态 j 的 概率 常常 收敛 到 一 个 独立 于 初始 状态 的 极限 什 . 即 如 果 我 们 记 这 个 
值 为 已 , 那么 
P= im Pl) 
其 中 假定 了 极限 存在 而 且 独 立 于 初始 状态 
为 了 推导 忆 的 一 组 方程 ,首先 考虑 这 组 向 前 方程， 
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P(t) = YD qrsPix(t) — viPi(t) (6.17) 
Kk#j 


现在 如 果 让 t 趋 于 co, 那么 假定 可 以 交换 极限 和 求 和 的 次 序 , 则 得 到 
dm Py(t) = lim, [本 qu Pk(b 一 wmg| = aiPe —vP 
ji pen kj 


然而 , 因为 P(t) 是 一 个 有 界 函数 (是 一 个 概率 , 它 总 是 在 0 和 1 之 间 ), 所 以 如 果 
Py(t) 收敛 ,那么 它 必须 收敛 到 0 (为 什么 ). 因此 , 必须 有 
0= DaiPe —vP 
kz#j 
从 而 
Ww 忆 二 gw 及， 对 于 一 切 状态 了 (6.18) 
k#j 
上 面 的 一 组 方程 与 方程 
DB=1 (6.19) 
学 


联合 起 来 可 以 用 来 求解 极限 概率 . 
注 (i) 我 们 假定 了 极限 概率 忆 存在 . 对 此 的 一 个 充分 条 件 如 下 : 

(a) 马尔 可 夫 链 的 所 有 状态 在 下 述 意义 下 互通 , 即 对 于 一 切 i,j, 从 状态 i 出 发 
有 一 个 迟早 进入 状态 j 的 正 概率 ; 

(b) 马尔 可 夫 链 在 下 述 意义 下 正常 返 , 即 从 任意 状态 出 发 , 回 到 这 个 状态 的 平均 
时 间 有 限 . 

车 条 件 (a) 和 (b) 成 立 , 则 极限 概率 存在 , 而 且 满足 方程 (6.18) 和 (6.19). 此 外 ， 
局 也 解释 为 这 个 过 程 在 状态 j 的 时 间 的 长 程 比例 . 

(让 方程 (6.18) 和 (6.19) 有 一 个 很 好 的 解释 : 在 任意 时 间 区 间 (0,t) 中 , 转移 到 
状态 了 的 次 数 必须 在 相差 1 的 范围 内 等 于 转移 出 状态 j 的 次 数 (为 什么 ?). 因此 , 在 
长 程 中 , 转移 到 状态 j 发生 的 速率 必须 等 于 转移 出 状态 j 发 生 的 速率 . 现在 , 当 过 程 
处 在 状态 了 时 , 它 以 速率 vj 离开 , 而 已 是 它 处 在 状态 了 的 时 间 的 比例 , 于 是 推出 

岂 忆 = 过程 离开 状态 j 的 速率 
类 似 地 , 当 过 程 处 在 状态 上 时 , 我 们 看 到 它 以 速率 gr; 从 状态 上 进入 状态 j. 因此 ， 
及 作为 在 状态 大 的 时 间 的 比例 , 我 们 看 到 从 大 到 了 的 转移 发 生 的 速率 是 qkjP. 于 
四 》 eu 且 = 过 程 进入 状态 j 的 速率 
en 
所 以 ,方程 (6.18) 是 一 个 过 程 进入 和 离开 状态 j 的 速率 相等 的 一 个 陈述 . 因为 它 平 
衡 (即使 之 相等 ) 了 这 些 速率 , 方程 (6.18) 有 时 被 当 作 “平衡 方程 ”. 
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( 阁 ) 当 极 限 概率 户 存在 时 , 我 们 说 这 个 链 是 遍历 的 . 有 时 PP 称 为 平稳 概率 ， 
为 可 以 证 明 (正如 离散 时 间 情 形 ) 若 初 始 状态 按 分 布 { 忆 } 选取 , 则 对 于 一 切 所 在 时 
刻 世 处 于 7 的 概率 是 PP;. 

现在 我 们 确定 生 灭 过 程 的 极限 概率 . 由 方程 (6.18) 或 等 价 地 , 使 过 程 离开 一 个 
状态 的 速率 与 它 进入 这 个 状态 的 速率 相等 , 我 们 得 到 


状态 离开 它 的 速率 = 进入 它 的 速率 

0 NP = pnP 

1 (QQ1+p)P = paP + NP 

2 Ma + p2)B = psPs + AP 

nn>1 (Mn + pin)Pn = pint+iPnt1 + Mn-1iPn-1 
通过 将 每 一 个 方程 与 它 前 面 的 方程 相 加 , 我 们 得 到 

NP = pnP, 
AP = paP, 


NP = psPs, 


MnPn=pntiPnt, n>0 


通过 及 求解 , 导出 
R= Ep, 
Hl 
B= 
HA2 HA2H1 
入 和 2 入 
及 = 空 疡 = 空 op 
Ha AHA3H2Hl 
i “Re tp 和 -in-2 NN 
Hnpin—1*** p21 


利用 noPs= 1 i 
1 


也 就 是 


所 以 
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NA Mn-1 


ee Xo 和 入 
了 1+ 》 全 
Hip2 ~( Te 


nz1 (6.20) 


n=1 
上 述 方程 也 向 我 们 展示 了 , 什么 样 的 条 件 对 于 这 些 极限 的 存在 是 必须 的 . 即 必须 
要 有 全 4 
MA Nas gs (6.21) 
nl Mpa jn 
也 可 以 证 明 这 个 条 件 是 充分 的 . 
在 多 服务 线 的 指数 排队 系统 ( 例 6.6) 中 , 条 件 (6.21) 简化 为 
ea 


[FT 二 


n=s+1 

它 等 价 于 和 /(sp) <1. 
对 于 移民 的 线性 增长 模型 ( 例 6.4), 条 件 (6.21) 简化 为 
+ 0+(n- DN 人 


nlp™ 
利用 比例 判别 法 , 为 保证 上 式 收敛 , 只 需 
6 十 入 (9 十 PA) nlp™ , 9+nA _A 


de mm Ni dm 
即 在 和 <j 时 条 件 满足 . 当 入 > 人 时 , 容易 证 明 条 件 (6.21) 并 不 满足 . 
例 6.13( 机 器 修理 模型 ) 考察 由 M 台 机 器 和 一 个 服务 工 组 成 的 一 个 加 工 车 间 . 假 
设 每 台 机 器 在 失效 前 的 运行 时 间 具 有 均值 为 1/ 和 的 指数 分 布 , 再 假设 服务 工 修理 一 
台 机 器 的 时 间 具 有 均值 为 1/4 的 指数 分 布 . 我 们 要 回答 这 些 问 题 : (a) 不 在 使 用 的 
机 器 的 平均 台数 是 多 少 ? (b) 每 台 机 器 在 使 用 中 的 时 间 比 例 是 多 少 ? 
解 ”如果 ? 台 机 器 不 在 使 用 , 我 们 就 说 系统 处 在 状态 n, 那么 上 面 的 是 一 个 具有 参 
数 


各 一 内 n>1 
和 -人 OU-mN ngsM 
0， n>M 


的 生 灭 过 程 . 这 只 需 将 失效 的 机 器 当 作 一 个 到 达 , 并 且 将 修复 的 机 器 当 作 离开 .如 
果 任 何 机 器 失效 , 那么 因为 修理 工 的 速率 是 1, 所 以 有 jin = 作 另 一 方面 , 如 果 n 台 
机 器 不 在 使 用 , 那么 由 于 余下 的 在 使 用 的 M 一 n 台 机 器 中 的 每 一 台 都 以 速率 和 失 
效 , 由 此 推出 和 = (M 一 n) 和 . 从 方程 (6.20) 我 们 得 到 n 台 机 器 不 在 使 用 的 概率 PP 
为 
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1 


六 
1+ nMAM — DA (M —n+ lMpn] 
1 


1+ PrN MYM 一 mL 
WA"MYM -nD)! 
1+ MND" MYM 一 mL 
因此 , 不 在 使 用 的 机 器 的 平均 台数 为 
M M 
Eon" MYM —n)! 
2 Er Ne) 


为 了 得 到 一 台 给 定 的 机 器 在 工作 的 时 间 的 长 程 比例 , 我 们 计算 它 在 工作 的 等 价 极限 
概率 . 为 此 我 们 取 条 件 于 不 在 工作 的 机 器 的 台数 , 得 到 


n=0,1,.…,M 


M 
P{ 机 器 在 工作 } = 》， P{ 机 器 在 工作 In 台 不 在 工作 } P， 
n=0 


M 
= > <P。 (因为 车 nn 台 不 在 工作 , 则 Mn 台 在 工作 ) 


n=0 


其 中 学 和 onP。 由 方程 (6.22) 给 出 . 四 
例 6.14(M/M/1 排队 系统 ) 在 M/M/1 排队 系统 中 , 和 a = 和 ,pin = 从 因此 从 方程 
(6.20) 可 得 , 车 Mn < 1, 就 有 
(Min 
1+ 5 (Mi) 
显然, 为 了 存在 极限 概率 A 必须 比 六 小. 顾客 以 速率 到 达 , 而 以 速率 4 接受 服 
务 , 因此 若 和 > 心 则 以 比 接受 服务 的 速率 更 快 的 速率 到 达 , 队列 的 长 度 将 趋向 无 穷 . 
和 = 的 情形 就 像 4.3 节 中 的 对 称 随机 游 动 , 它 是 零 常 返 的 , 因此 没有 极限 概率 ， 国 
例 6.15 ”重新 考虑 例 6.1 中 的 擦 皮鞋 店 , 并 且 确定 过 程 处 在 0、1、2 中 每 一 个 状态 
的 时 间 的 比例 . 因为 这 不 是 一 个 生 灭 过 程 (由 于 过 程 可 以 从 状态 2 直接 到 状态 0)， 
我 们 从 极限 概率 的 平衡 方程 开始 . 
状态 。 离开 它 的 速率 = 进入 它 的 速率 

0 和 AP = poPy 

1 nnP = 人 AP 
2 bz2P2 = pnP 


P= = (NA)"( -MA), n>0 
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利用 PB 求解 导出 


Pp E re 由 
bh2 A 
因此 
Hik2 
和 
?pat Mm + pa) 
以 及 
M2 
P=—— 
1 japa + Mp + pa) 
已 和 AH 


”十 AU 十) 


例 6.16 考察 由 n 个 部 件 与 一 个 修理 工 组 成 的 系统 . 假设 部 件 i 运行 了 一 个 速率 


为 Xi 的 指数 分 布 的 时 间 后 失效 . 用 来 修理 部 件 i 的 时 间 是 速率 为 ji(i = 1， 


ee 


的 指数 随机 变量 . 假设 如 果 存在 多 于 一 个 部 件 失 效 , 修理 工 总 是 修理 最 近 失效 的 部 
件 . 例如 , 如 果 现 在 有 两 个 部 件 失 效 , 即 部 件 1 和 部 件 2, 其 中 部 件 1 是 最 近 失 效 的 ， 
那么 修理 工 将 修理 部 件 1. 然而 , 若 部 件 3 在 部 件 1 完成 修理 前 失效 , 则 修理 工 将 停 


止 修理 部 件 1, 而 去 修理 部 件 3( 即 最 近 失 效 的 部 件 优先 服务 ). 


用 一 个 连续 时 间 的 马尔 可 夫 链 分 析 上 面 的 情形 , 其 状态 必须 代表 按 失 效 的 次 序 
失效 的 部 件 的 集合 . 即 如果 记 1,…,it 是 上 个 失效 的 部 件 (其 他 的 n 一 个 部 件 在 运 
行 ), 以 为 最 近 失 效 的 (因此 是 现在 正在 修理 的 ), 以 iz 为 第 二 个 最 近 失效 的 , 如 此 
等 等 , 那么 这 时 的 状态 将 是 ( 记 ,…,ik). 因为 对 于 一 组 固定 的 上 个 失效 部 件 共 有 有 局 


种 可 能 的 排序 , 而 选取 这 样 的 组 共有 (%) 种 , 由 此 推出 共有 


/nn nl! 1 
学 (ou A)! > 
个 可 能 的 状态 . 

极限 概率 的 平衡 方程 组 如 下 ， 


(a+ 2 Pl = 区 Pliiyy :ir)pi + P(i2,** ik)Ma, 


(6.23) 
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其 中 $ 是 所 有 的 部 件 都 在 工作 的 状态 . 上 述 方程 组 是 因为 , 状态 (ia …, 钛 ) 的 离开 
发 生 于 , 当 一 个 任意 额外 部 件 失效 , 或 者 部 件 ia 修理 完成 . 此 外 , 状态 (i,…,ix) 的 
进入 发 生 于 , 当 状态 是 (i,,… ,ik) 时 部 件 i 修理 完成 , 或 者 当 状态 是 (i2,…,ix) 时 
部 件 ii 失效 . 


然而 , 如 果 我 们 取 
Pliy…,ik)= p(y) (6.24) 
那么 容易 看 到 方程 (6.23) 满足 . 因此 , 由 唯一 性 这 些 必须 是 极限 概率 , 并 应 确定 P(g) 
使 它们 的 和 为 1. 即 | 
P(g) = ER 
作为 例子 , 假设 n= 2, 因而 有 5 个 状态 : %, 1,2, (1,2), (2,1). 我 们 从 上 面 有 
要 Al ， )X 2AiXz]-: 
PO) 一 [+ 芝 + 各 + 玖 2 
a 
P(1)= pr 
-六 
P(2) = pr 


P(1,2) = PC = 2 P(g) 


有 趣 的 是 , 利用 方程 (6.24), 对 于 给 定 失 效 的 部 件 组 , 这 些 部 件 的 可 能 排序 是 等 可 能 
的 . 国 
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考察 一 个 连续 时 间 的 遍历 的 马尔 可 夫 链 , 我 们 从 一 个 与 前 面 不 同 的 观点 考察 其 
极限 概率 Pi. 如 果 我 们 考察 访问 的 状态 序列 , 而 不 管 在 一 次 访问 中 在 每 个 状态 停留 
的 时 间 , 那么 这 个 序列 构成 一 个 以 Pi; 为 转移 概率 的 离散 时 间 的 马尔 可 夫 链 , 称 为 
嵌入 链 . 假定 这 个 离散 时 间 的 马尔 可 夫 链 是 遍历 的 ， 并 且 用 zi 记 它 的 极限 概率 . Ti 
是 

=EnPw 对 一 切 i 
n=1 
的 唯一 解 . 

现在 , 由 于 i 表示 过 程 转移 到 状态 i 的 比例 , 而 因为 1/vi 是 在 一 次 访问 中 处 在 
状态 i 的 平均 时 间 , 显然, 在 状态 i 的 时 间 比 例 Pi 将 是 7; 的 加 权 平 均 , 其 中 i 的 
权重 与 1/w 成 比例 . 即 
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i (2 


为 了 验证 上 式 , 回忆 极限 概率 P; 必须 满足 
viP: = 万 qi 对 一 切 i 
天 
或 者 等 价 地 , 由 于 Pi = 0 y 
viPi = PvP， 对 一 切 i 
7 


因此 , 对 于 由 方程 (6.25) 给 出 的 Pi, 下 面 的 等 式 是 必要 的 
i=D_mPa 对 一 切 i 
了 


这 当然 成 立 , 因为 事实 上 这 正 是 天 的 定义 . 
假设 现在 这 个 连续 时 间 的 马尔 可 夫 过 程 已 经 运行 了 很 长 的 时 间 , 而 且 假 设 它 开 
始 于 某 个 (很 大 的 ) 时 间 了 7, 我 们 按时 间 的 倒 向 进行 追踪 这 个 过 程 , 为 了 确定 这 个 道 
向 过 程 的 概率 结构 , 我 们 首先 注意 , 给 定 在 某 个 时 刻 t 处 于 状态 i, 已 经 处 在 这 个 状 
态 的 时 间 大 于 s 的 概率 正 是 e-"…. 这 是 由 于 
P{ 过 程 在 [二 s, 相 都 在 状态 让 


P{ 过 程 在 [t 一 s,4] 都 在 状态 i|X(t) = 讨 = P{X() = 
_ P{X(t—s)=i}e-" 
> P{X(t) = 计 
=@-s 
因为 对 于 大 的 t, P{X(t 一 s)=i} =P{X(t) =i} = PR. 

换 句 话说 , 按时 间 倒 向 地 进行 , 过 程 在 状态 i 停留 的 时 间 也 是 速率 为 w 的 指数 
随机 变量 . 此 外 , 如 在 4.8 节 中 所 示 , 逆向 过 程 所 访问 的 状态 序列 构成 一 个 离散 时 间 
的 马尔 可 夫 链 , 其 转移 概率 Qi 为 

niPi 


Qs = 瑟 生 


mi 

因此 , 我 们 从 上 面 看 到 , 这 个 逆向 过 程 是 一 个 连续 时 间 的 马尔 可 夫 链 , 与 具有 一 步 
转移 概率 Qii 的 向 前 时 间 过 程 有 相同 的 转移 速率 . 所 以 如 果 典 入 链 是 时 间 可 逆 的 ， 
即 着 NiPij = TijPii, 对 一 切 i,j 
连续 时 间 的 马尔 可 夫 链 在 时 间 倒 向 的 过 程 与 原 过 程 有 相同 的 概率 结构 的 意义 下 , 是 
时 间 可 这 的 . 现在 利用 PB = (ri/ui)/ 志 i(ri/u), 我 们 看 到 上 面 的 条 件 等 价 于 

Pq = Pqn， 对 一 切 i,j (6.26) 
由 于 RP 是 处 于 状态 i 的 时 间 的 比例 , 而 qi; 是 处 在 状态 i 的 过 程 到 状态 j 的 速率 ， 
时 间 可 道 性 的 条 件 是 , 过 程 直 接 从 状态 i 到 状态 j 的 速率 等 于 它 直接 从 状态 j 到 状 
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态 i 的 建 率 . 应 该 注意 到 , 这 正 是 一 个 遍历 的 离散 时 间 的 马尔 可 夫 链 是 时 间 可 逆 的 
所 需 的 相同 条 件 (参见 4.8 节 ). 

关于 上 述 时 间 可 逆 性 的 条 件 的 一 个 应 用 , 引出 生 灭 过 程 的 下 述 命题 . 
命题 6.5 ”一 个 遍历 的 生 灭 过 程 是 时 间 可 这 的 . 
证 明 ”我 们 必须 证 明 一 个 生 灭 过 程 从 状态 i 到 状态 ;+ 1 的 速率 等 于 从 状态 i 十 1 
到 状态 i 的 速率 . 现在 , 在 任意 长 的 时 间 t 内 , 从 i 到 i+1 的 转移 次 数 必须 在 相差 1 
以 内 等 于 从 i+1 到 i 的 转移 次 数 (由 于 过 程 每 次 从 i 到 i+1 的 转移 必须 回 到 i, 而 
这 只 能 通过 ;+ 1 发生, 而 反之 亦 然 ). 因此 , 当 t 一 co 时 , 这 样 的 转移 的 次 数 趋 于 无 
穷 , 由 此 推出 从 i 到 i+1 的 转移 速率 等 于 从 ;+ 1 到 i 的 转移 速率 . 国 

命题 6.5 可 以 用 来 证 明 一 个 重要 的 结果 : 一 个 M/M/s 排队 系统 的 输出 过 程 是 
泊 松 过 程 . 我 们 将 它 叙 述 为 一 个 推论 . 
推论 6.6 ”考察 一 个 M/M/s 排队 系统 , 其 中 顾客 核 速率 为 A 的 泊 松 过 程 到 达 , 并 
且 在 s 条 服务 线 的 任意 一 条 接受 服务 , 每 条 有 一 个 速率 为 /的 指数 分 布 的 服务 时 
间 . 如 果 入 < sh, 那么 在 过 程 运行 很 长 的 时 间 以 后 , 顾客 离开 的 输出 过 程 是 一 个 如 
率 为 入 的 泊 松 过 程 . 
证 明 ”以 X(t) 记 在 时 刻 t 系统 中 的 顾客 数 . 由 于 M/M/s 排队 系统 是 一 个 生 灭 过 
程 , 由 命题 6.5 推出 {X(t),t > 0} 是 时 间 可 道 的 . 现在 按时 间 向 前 进行 , 使 X(t) 增 
加 1 的 时 间 点 构成 一 个 泊 松 过 程 , 因为 它们 正 是 顾客 的 到 达 时 间 . 因此 , 由 时 间 可 
逆 性 当 我 们 按时 间 倒 向 进行 时 , 使 X(b 增加 1 的 这 些 时 间 点 也 构成 一 个 泊 松 过 程 . 
但 是 后 面 的 这 些 点 恰 是 顾客 离开 的 时 间 点 (参见 图 6.1). 因此 , 离开 时 间 构 成 速率 
为 的 泊 松 过 程 . 国 
例 6.17 考虑 一 个 先 来 先 服务 的 M/M/1 排队 系统 , 其 中 到 达 率 为 和 , 服务 率 为 从 
入 < 它 处 在 稳 态 . 给 定 顾客 C 在 系统 中 总 共 花 了 时 间 t. 当 C 到 达 时 出 现 的 其 他 
顾客 人 数 的 条 件 分 布 是 什么 ? 


We 


一 一 -一 1 


X = 按时 间 倒 向 进行 时 , X(?) 增加 的 时 间 点 
= 按时 间 向 前 进行 时 , X(7) 减少 的 时 间 点 


图 6.1 系统 中 的 人 数 
解 ” 假 设 C 在 时 刻 s 到 达 , 并 且 在 时 刻 t+ s 离开 . 因为 系统 是 先 来 先 服务 的 , 在 C 


到 达 时 系统 中 的 人 数 等 于 发 生 在 时 刻 s 后 而 在 时 刻 上 + s 前 离开 的 其 他 人 数 , 它 等 
于 逆 过 程 在 这 个 区 间 到 达 的 人 数 . 现在 , 在 逆 过 程 中 , C 在 时 刻 上 + s 到 达 并 且 在 时 
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刻 s 离开 . 因为 逆 过 程 也 是 一 个 M/M/1 排队 系统 , 在 长 度 为 t 的 区 间 中 到 达 的 人 
数 是 均值 为 Xt 的 泊 松 分 布 . (对 于 一 个 更 加 直接 的 论据 , 参见 8.3.1 节 .) 国 

我 们 已 经 证 明了 , 过 程 是 时 间 可 逆 的 当 上 且 仅 当 

Pq = Pqin， 对 一 切 让 了 

仿照 离散 时 间 的 马尔 可 夫 链 的 结果 , 如 果 我 们 能 够 找到 满足 上 述 条 件 的 概率 向 
基 P, 那么 马尔 可 夫 链 是 时 间 可 逆 的 , 而 Pi 就 是 长 程 概率 . 即 我 们 有 下 述 命题 , 
命题 6.7 如果 对 某 一 组 {Pi} 有 

DPR=1, P>0 


以 及 
Piqij = Pjqjii， 对 一 切 i 关 7 (6.27) 
那么 这 个 连续 时 间 的 马尔 可 夫 链 是 时 间 可 北 的 , 而 且 忆 表示 在 状态 i 的 极限 概率 
证 明 ”对 于 固定 的 i, 在 方程 (6.27) 中 对 所 有 的 j (7 取 i) 求 和 , 我 们 得 到 
> Pgi; = >» Pqii 
Ft Ft 
因为 学;jyi qi = wi, 我们 有 
viPi = Pq 
j#i 

因此 , P; 满足 平衡 方程 组 , 从 而 表示 极限 概率 . 因为 方程 (6.27) 成 立 ， 人 
时 间 可 道 的 . 
例 6.18 考察 由 n 台 机 器 和 为 它们 服务 的 单 台 修 理 设备 ， 假 设 当 机 器 i(i = 
1,…,n) 失效 时 需要 速率 为 yi 的 指数 地 分 布 的 工作 量 使 它 修复 ， 修 理 设备 等 可 
能 地 修理 所 有 失效 的 部 件 , 即 只 要 有 上 台 机 器 失效 , 1 < k < n, 每 台 以 每 个 单位 时 
间 速 率 1/k 接受 修理 . 最 后 , 假设 每 次 机 器 i 回 到 运行 时 , 它 保持 运行 一 个 速率 为 
Ai 的 指数 分 布 时 间 . 

上 述 情形 可 以 用 一 个 有 2" 个 状态 的 连续 时 间 的 马尔 可 夫 链 来 分 析 , 它 在 任意 
时 间 的 状态 对 应 于 在 此 时 间 失 效 的 机 器 的 集合 . 因此 , 例如 , 如 果 机 器 记 ,… ,ix 都 
失效 , 而 其 他 机 器 都 在 运行 , 这 时 的 状态 就 是 (ia … ,让 ), 而 瞬时 转移 速率 如 下 

Ga 二 As Ga 天 

其 中 记 ,……,ik 各 不 相同 . 上 述 事实 是 由 于 机 器 i 的 失败 率 总 是 Xix, 而 在 有 大 个 机 
器 失效 时 , 机 器 i 的 修复 率 是 j/k. 

因此 由 方程 (6.27) 得 , 时 间 可 北 性 方程 是 

Pi ig)pic/k = Pi ip-1) Xin 


从 而 
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大 和 Ai 
P( 外) 一 一 PP( 人 让-1) 
Ai 


RX = di 
= 人 -Da-:plfi ia) 进行 和 代 
is Mig-i 


= fo /Hi,)P(9) 


其 中 4 是 所 有 机 器 者 在 工作 这 个 状态 因为 
P($)+ DP(i,.,ik)=1 
我 们 有 


-1 
1+ AL To/ pei,) (6.28) 
ri j=1 


其 中 上 面 的 求 和 遍及 {1,2,…,n} 的 所 有 2" 一 1 个 非 空子 集 (ia … 庆 ), 因为 对 于 
这 样 选取 的 向 前 概率 向 其 满足 时 间 可 地 方程 , 由 命题 6.7 推出 这 个 链 是 时 间 可 逆 的 ， 
而 且 


大 
Pt) = kIT /ri,)P(¢) 


j=1 
其 中 P(g) 由 (6.28) 给 出 . 
例如 , 假设 有 两 台 机 器 . 那么 , 从 前 面 所 述 可 得 
1 
1+A/p + MN/p2 + 2NN/ pp2" 
Al/ 
1+A/p + NM/p2 + NN /pp 
MN/p2 
1+A/p + MN/p2 + 2ANN/ pp2’ 


P($)= 


P(D) = 


P(2) = 


Nh 
Hip2[l + AN/p1 十 M2/p2 + 2ANM2 /pip2] 
考虑 一 个 状态 空间 为 5 的 连续 时 间 的 马尔 可 夫 链 . 我 们 说 这 个 马尔 可 夫 链 截 
止 在 集合 4 c 5 上 , 如 果 对 于 一 切 ie 4,j # 4, 将 gi; 改变 为 0. 即 不 再 允许 从 类 
4 中 转移 出 去 , 而 在 4 中 的 状态 保持 以 前 相同 的 速率 . 一 个 有 用 的 结果 是 , 如 果 这 
个 链 是 时 间 可 逆 的 , 那么 其 截止 的 链 也 是 时 间 可 逆 的 . 
命题 6.8 ”一 个 具有 极限 概率 已 (jE S) 的 时 间 可 取 的 链 ， 其 截止 在 集合 4C S 而 
保持 不 可 约 的 链 也 是 时 间 可 并 的 , 而 且 具 有 由 


1 P(1,2)= 
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已 
PA= Es 
” DieaP: 


‘EA 


给 出 的 极限 概率 PA. 
证 明 ”由 命题 6.7, 对 于 给 定 的 P#, 我 们 需要 证 明 
Phoj = Poi， 对 ie4Je4 4 
或 者 , 等 价 地 
Piqij=Pgqn,， 对 ie A,jeA 
但 是 , 它 成 立 是 由 于 假定 原来 的 链 是 时 间 可 逆 的 . 国 
例 6.19 ”考察 一 个 M/M/1 排队 系统 , 其 中 到 达 者 只 要 发 现 系 统 中 有 N 人 就 不 再 进 
入 . 这 种 有 限 容 基 的 系统 可 以 看 成 M/M/1 排队 系统 在 状态 集合 4 = {0,1,…, NN} 
上 的 截止 ， 因 为 在 M/M/1 排队 系统 中 的 人 数 是 时 间 可 逆 的 , 而 且 具 有 极限 概率 
忆 = (和 /1) (1- MA), 由 命题 6.8 推出 , 有 限 容量 的 模型 也 是 时 间 可 逆 的 , 而 且 有 由 
(MA 和 

给 出 的 极限 概率 . 国 

另 一 个 有 用 的 结果 由 下 面 的 命题 给 出 , 其 证 明 留 作 习题 . 
命题 6.9 ”如 果 对 于 i= 1,…,n, {Xi(t),t > 0} 都 是 独立 的 时 间 可 逆 的 连续 时 间 的 
马尔 可 夫 链 , 那么 向 量 过 程 {(Xi(t),…,Xn(t)),t> 0} 也 是 时 间 可 逆 的 连续 时 间 的 
马尔 可 夫 链 . 
例 6.20 ”考察 由 个 部 件 组 成 的 系统 , 其 中 部 件 i(i = 1,…,n) 按 速率 和 i 运行 一 
个 指数 时 间 , 然后 失效 . 在 它 失 效 时 , 对 部 件 i 的 修理 开始 , 修理 需要 用 一 个 速率 为 
hi 的 指数 分 布 时 间 . 部 件 一 旦 修复 , 将 与 新 的 同样 好 . 部 件 运 行 是 彼此 独立 的 , 除了 
当 只 有 一 个 部 件 工作 时 系统 将 暂时 停止 直至 完成 了 一 次 修理 , 然后 以 两 个 部 件 重新 
运行 . 

(a) 系统 停止 的 时 间 比 例 是 多 少 ? 

(b) 正在 修理 的 部 件 的 (极限 ) 平均 个 数 是 多 少 ? 
解 ” 首 先 考虑 系 统 , 它 没有 在 只 有 一 个 部 件 在 工作 时 就 停止 的 限制 .对 于 i = 1,…,n,， 
如 果 部 件 i 在 时 刻 t 正在 工作 , 令 Xi(t) = 1, 如 果 失 效 , 则 Xi(t) = 0. 那么 {Xi()， 
t > 0}(i = 1,…,n) 都 是 独立 的 生 灭 过 程 . 因为 生 灭 过 程 是 时 间 是 可 逆 的 , 由 命题 
6.9 推出 , 过 程 {(Xa(D，…,Xn(b),t > 0} 也 是 时 间 可 北 的 . 现在 , 对 

PO) = lim P{Xi(t) =j},， j=0,1 


我 们 有 


[a Xi 
已 GD) = ，P(0)= 
i A “(0) Mit 入 
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此 外 , 记 
Pj jn) = Bim P{Xi(t) = ,i= 1,.…,n} 


由 独立 性 推出 
PO jn) = TIPRG), =0,1, i=l,,n 
i=1 
现在 , 注意 带 有 只 有 一 个 部 件 工 作 时 系统 就 停止 的 约束 , 等 价 于 将 上 面 的 无 约束 的 


系统 截止 在 除了 所 有 的 机 器 都 失效 的 那个 状态 以 外 的 所 有 的 状态 组 成 的 集合 上 . 所 
以 , 以 Pr 记 这 个 截止 系统 的 概率 , 我 们 由 命题 6.8 有 


Pr 加) = Di>o 


其 中 n 
C=P(0,.…,0)= [TIN/( +»%) 
i=1 


因此 , 令 (0,1i) = (0,…,0,1,0,…,0) 是 nn 个 0 和 1 的 向 基 , 而 它 的 唯一 的 1 是 在 
第 i 个 位 置 上 , 我 们 有 


Pr( 系 统 失效 ) = 》_ Pr(0, 1;) 


i=1 


“ls) 


_ CD/AN 
1 一 C 
以 RR 记 正 在 修理 的 部 件 的 个 数 . 那么 如 果 部 件 i 正在 修理 , 令 天 等 于 1, 否则 令 它 
等 于 0, 对 于 无 约束 ( 非 截止) 系统 有 


EIRI=E | > | = 和 PRO = Dt 
ti 一 1 i=1 i=1 


但 是 , 此 外 还 有 
四 [= E[RI| 所 有 的 部 件 都 在 修理 |C 
+E[RI 不 是 所 有 的 部 件 都 在 修理 ](1 一 C) 
=nC+Er[RG-C) 
它 荀 涵 


ZETA/+A) 一 PC 站 


ErlR] = 这 记 
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6.7 倒 逆 链 


考察 一 个 遍历 的 时 间 连 续 马 尔 可 夫 链 , 其 状态 空间 是 5, 具有 瞬时 转移 速率 qi 
和 极限 概率 Pi,i e 5, 同时 假定 此 链 已 经 运行 了 很 长 的 (在 理论 上 无 穷 大 ) 时 间 . 于 
是 由 上 一 节 的 结果 得 出 , 时 间 倒 道 地 看 过 程 状态 的 进行 , 也 是 一 个 时 间 连 续 的 马尔 
可 夫 链 , 它 具有 瞬时 转移 速率 5, 满足 


Pq = Pan, i#i 
即使 是 与 前 向 链 不 同 的 情形 (就 是 说 , 即使 是 在 链 不 可 逆 的 情形 ), 倒 逆 链 也 是 一 个 


十 分 有 用 的 概念 . 
注意 倒 递 链 在 一 次 访问 状态 i 时 停留 的 时 间 总 基 是 速率 为 v? = 2 5 的 指数 
Ti 


随机 变量, 因为 无 论 是 通常 地 (向 前 ) 还 是 时 间 倒 逆 地 观测 , 过 程 在 一 次 访问 状态 i 
时 停留 的 时 间 总 量 是 一 样 的 , 由 此 推出 倒 逆 链 在 一 次 访问 状态 i 时 停留 时 间 的 分 布 ， 
和 前 向 链 在 一 次 访问 停留 该 状态 的 时 间 分 布 应 该 是 一 样 的 . 即 我 们 有 


WW= 


进而 , 因为 无 论 是 从 时 间 通 常 方向 (向 前 ) 还 是 从 时 间 倒 逆 方 向 观测 , 链 停留 在 状态 
i 的 时 间 比 例 应 该 是 一 样 的 , 直观 地 这 两 个 链 应 该 有 相同 的 极限 概率 . 
命题 6.10 ” 令 连 续 时 间 的 马尔 可 夫 链 具有 瞬时 转移 速率 gi; 和 极限 概率 Pie 9， 
且 令 吃 是 倒 这 链 的 皮 时 转移 吉 率 . 那么 ,对 避 二 》 5 入 = 二》 qij 有 
j#i j#i 
VW=U 

进而 , Pi,i E 5 也 是 倒 北 链 的 极限 概率 . 
证 明 利用 Pig;; = Pqji, 我 们 有 

Dj = Pan/P=wP/P= 

i#i i#i 
其 中 用 了 (由 方程 (318) 蕊 Pqii = viP. 

岳 


倒 逆 链 和 前 向 链 有 相同 的 极限 概率 这 件 事 , 形式 上 可 以 由 万 满足 倒 逆 链 如 下 


的 平衡 方程 组 来 证 明 : 
WP=D Pg, jes 
kj 


现在 , 因为 起 = 和 Piqij = Pjqjk, 上 述 方程 组 等 价 于 


vB=) Pr, jes 
Kk#¥j 
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这 就 是 满足 的 已 知 的 倒 北 链 平衡 方程 组 . 

倒 逆 链 和 前 向 链 具 有 相同 的 长 程 比例 , 故 下 式 成 立 容易 理解 . 

Pigi; = Pjqgjii, i#j 

因为 PB 与 倒 逆 链 在 状态 i 停留 时 间 成 比例 , 而 5 是 当 处 在 i 时 转移 到 状态 j 的 速 
率 , 由 此 推出 Piq;; 是 倒 逆 链 从 i 转移 到 j 的 速率 . 类 似 地 , Pq;; 是 前 向 链 从 j 转移 
到 i 的 速率 . 因为 (前 向 的 ) 马尔 可 夫 链 每 次 从 j 到 i 的 转移 可 以 看 成 某 人 从 时 间 倒 
逆 地 看 从 ; 到 j 的 转移 , 这 就 显然 有 Piq;; = Pjgji. 

下 述 命 题 显示 , 如 果 能 求 得 “ 倒 北 链 方程 组 ”的 一 个 解 , 则 此 解 是 唯一 的 解 , 而 
且 它 就 是 极限 概率 . 
命题 6.11 今 qij 表示 一 个 不 可 约 的 连续 时 间 的 马尔 可 夫 链 的 转移 速率 . 如 果 能 
求 得 值 0; 和 一 条 列 和 为 1 的 正 值 Pi 使 


Pg = Pqn, i#j (6.29) 
和 
= ies (6.30) 
#1 Fi 


成 立 , 那么 0% 是 倒 北 链 的 转移 概率 , 而 PP 是 (两 个 链 的 ) 极限 概率 . 
证 明 ”我 们 证 明 它 们 满足 平衡 方程 组 (6.18) 来 说 明 P; 是 极限 概率 . 为 证 明 我 们 将 
方程 组 (6.29) 对 j,j 关 i 求 和 得 到 

PD = Pa ies 


j¥i #1 


R= be 
因为 EP 三 1, 可 见 PP 满足 平衡 方程 组 了 PP 是 极限 概率 . 因为 Pq?; = Pjqji， 


这 也 就 推出 和 咏 是 倒 逆 链 的 转移 概率 . 国 
现在 假设 连续 时 间 的 马尔 可 夫 链 的 结构 可 使 我 们 对 倒 逆 链 的 转移 概率 作 一 个 

猜测 . 假定 此 猜测 满足 命题 6.11 的 方程 组 (6.30), 则 我 们 可 通过 看 是 否 存在 概率 满 

足 方程 组 (6.29) 验证 其 正确 性 . 若 这 样 的 概率 存在 , 则 我 们 的 猜测 是 正确 的 , 而 且 我 

们 也 找到 了 极限 概率 ; 若 这 样 的 概率 不 存在 , 则 我 们 的 猜测 是 不 正确 的 . 

例 6.21 考察 一 个 连续 时 间 的 马尔 可 夫 链 , 其 状态 都 是 非 负 整数 .假设 从 状态 0 

转移 到 状态 i 的 概率 为 oi， 2 Qi = 1, 而 状态 i 总 是 转移 到 状态 i 一 1. 也 就 是 , 对 


i>0 此 链 的 瞬时 转移 速率 为 


现在 用 方程 组 (6.30) 得 到 


Qoi = Vooi 


Qii-l = Vi 
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令 为 具有 从 状态 0 转移 到 下 一 个 状态 的 分 布 的 随机 变量 , 即 P{N = 庄 = ai,i > 
0. 再 则 , 在 链 每 次 进入 状态 0 时 , 我 们 就 称 之 为 开始 了 一 个 循环 . 因为 前 向 链 从 0 
转向 N, 然后 不 断 地 向 0 移 近 一 步 直至 到 达 此 状态 , 由 此 推出 倒 道 链 的 状态 不 断 地 
增加 1 直至 到 达 N, 并 在 这 个 点 转向 状态 0( 参 见 图 6.2). 
前 向 链 的 转移 NN-1 一 … 一 2 一 1 一 0 
倒 逆 链 的 转移 。 0 一 1 一 2 一 … 一 NI 一 N 
图 6.2 前 向 和 倒 首 转移 


现在 , 若 当前 链 处 在 状态 i, 则 此 循环 的 N 的 值 必须 至 少 是 i. 因此 , 倒 逆 链 的 
下 一 个 状态 是 0 的 概率 是 
ea a 
PN iN > PN3 寺 LN3 可 
而 下 一 个 状态 是 i+ 1 的 概率 是 
1-PIN=iN 2 -P(N 2it1N 21- 2 人 放 革 和 
又 因为 倒 逆 链 在 每 次 访问 一 个 状态 时 和 前 向 链 停留 相同 的 时 间 , 于 是 这 显示 了 倒 逆 
链 的 转移 速率 是 Qi 
qio= vp{N 3 i>0 
,P(N>i+l} 
Qiitl = WTPINZi} 
基于 上 述 猜测 , 倒 逆 方 程 组 Poqoi = Pigi 和 Piqii-1 = Pi-19?_1; 变 成 


i>0 


EE 
Povoai = PiviptN > 可 ， i>1 (6.31) 
和 2 
_P{N>i) , 
Pivi = Pi-w-iptN S11 i>1 (6.32) 


由 方程 组 (6.31) 可 推出 
P= PowvoP{N >i}/v, i>1 
因为 上 述 方程 对 i= 0 也 成 立 (由 于 P{N > 0} = 1), 对 一 切 i 求 和 , 我 们 得 到 


1= DB = Rvo DP{N > 让 /us 


i=0 


于 是 Pp 2 _P{NZ>i}/w 
ZEoP{N >i}/ve 


为 了 说 明 上 面 的 值 PR 也 满足 方程 组 (6.32), 注意 对 C = 1/ DioP{N > 讨 /ui 有 


i>20 
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viP; 二 vi-1Pi1 
FE{N> 可 P{N >i—1} 

它 立刻 说 明了 方程 组 (6.32) 也 是 满足 的 . 因为 我 们 选取 倒 逆 链 的 转移 速率 在 访问 状 
态 i 时 和 前 向 链 有 一 样 多 的 停留 时 间 , 并 没有 必要 检查 命题 6.11 的 条 件 (6.30), 并 
可 得 出 平稳 概率 . nm 
例 6.22( 一 个 串 行 排队 系统 ) ”考察 一 个 有 两 条 服务 线 的 排队 系统 , 其 中 顾客 按 速 
率 和 的 泊 松 过 程 到 达 服 务 线 1. 到 达 服 务 线 1 后 , 在 服务 线 1 空闲 时 进入 服务 , 或 
在 服务 线 1 忙 时 加 入 队列 . 在 服务 线 1 完成 后 , 顾客 转向 服务 线 2, 在 那里 在 服务 线 
2 空闲 着 时 进入 服务 , 否则 加 入 队列 . 在 服务 线 2 完成 后 , 顾客 离开 系统 . 在 服务 线 
1 和 2 的 服务 时 间 , 分 别 为 速率 la 和 /ia 的 指数 随机 变量 . 一 切 服务 时 间 都 是 独立 
的 , 且 独 立 于 到 达 过 程 . 

上 面 的 模型 可 用 连续 时 间 的 马尔 可 夫 链 来 分 析 , 其 状态 (n,m) 表示 当前 有 nt 个 
顾客 在 服务 线 1, 有 m 个 顾客 在 服务 线 2. 这 个 链 的 瞬时 转移 速率 为 


gm-lm,(nm 一 和 n>0 
qntlm-D)mm = m>0 


Qnmt+l),(mm) = 2 


为 了 求 极限 概率 , 我 们 先 从 链 的 时 间 倒 向 考虑 . 因为 在 实时 中 当 顾 客 离开 服务 线 2 
时 , 系统 中 减少 的 总 数 , 向 后 看 就 是 在 此 时 刻 在 系统 中 增加 的 总 数 加 上 正在 服务 线 
2 的 一 个 顾客 . 类 似 地 , 在 实时 中 当 顾 客 到 达 服 务 线 1 时 系统 中 人 数 将 增加 , 倒 逆 过 
程 在 此 时 刻 将 减少 在 服务 线 1 的 人 数 . 因为 在 服务 线 i 停留 的 时 间 , 无 论 是 时 间 向 
前 看 , 还 是 时 间 向 后 看 都 是 相同 的 , 看 来 倒 逆 过 程 是 两 条 服务 线 的 系统 , 其 中 顾客 以 
速率 为 /i,i = 1,2 的 指数 服务 时 间 在 服务 线 i, 先 到 服务 线 2, 再 到 服务 线 1, 然后 
离开 系统 . 现在 倒 逆 过 程 到 达 服务 线 2 的 速率 等 于 前 向 过 程 的 离开 速率 , 则 必须 等 
于 前 向 过 程 的 到 达 速 率 和 . (车 前 向 过 程 的 离开 速率 小 于 到 达 速 率 , 则 排队 的 长 度 将 
达到 无 穷 , 就 不 会 有 任何 极限 概率 .) 虽然 倒 逆 过 程 对 于 服务 线 2 的 到 达 过 程 还 不 清 
楚 是 否 为 泊 松 过 程 , 让 我 们 假设 它 确 是 泊 松 过 程 , 然后 利用 命题 6.11 确定 我 们 的 狂 
测 是 否 正确 . 

所 以 , 让 我 们 猜测 倒 逆 过 程 是 一 个 串 行 排队 过 程 , 其 中 顾客 按 速率 A 的 泊 松 过 
程 到 达 服 务 线 2, 在 接受 服务 后 转向 服务 线 1, 并 在 接受 服务 线 1 的 服务 后 离开 系 
统 . 此 外 , 在 服务 线 i 的 服务 时 间 是 速率 为 /vi,i = 1,2 的 指数 随机 变 基 . 现在 若 猜 测 
是 对 的 , 倒闭 过 程 的 转移 速率 将 是 


qinm),n-1m = Hh >0 


nmntim-D)= bh m>0 


Qinm), (nmty) = 和 
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这 个 具有 转移 速率 q* 的 链 从 (n,m) 离开 的 速率 是 
Ginm),(n—Lm) + qinm),(ntlm_D) + Ginm)(nm+y) = HT{n > 0} + p2T{m > 0} + 和 A 
其 中 I{k > 0} 在 k>0 时 等 于 1, 而 在 其 他 情形 等 于 0. 因为 上 式 也 是 前 向 过 程 从 


状态 (n,m) 离开 的 速率 , 命题 6.11 的 条 件 (6.30) 是 满足 的 . 
利用 上 面 猜测 的 倒 逆 时 间 速 率 , 倒 道 时 间 方程 组 将 是 


1 


Pr_imM=Pamp, n>0 (6.33) 
Ptrim-ii= Pnmk2, m>0 (6.34) 
Pnm+1h2 = Pn,m\ (6.35) 
将 (6.33) 式 写成 Pam = (和 /1)Pn-lm, 再 迭代 , 推出 
Pam = Np) Pa-2m = = (Mp)" Pom 
在 方程 (6.35) 中 置 n= 0,m = m 一 1, 得 到 Pom = (和 /12)Pom-1, 由 迭代 推出 
Pom = (Mp2)? Pom-2 =*…* = (A/p2)™ Po'o 


因此 , 所 猜测 的 倒 逆 时 间 方程 组 引出 
Pnm = (MI)" (Mp2)™ Poo 
利用 > TPam = 了 得 到 
Pam = (MA (1 — Np) Np2)™ (1 — M2) 
因为 容易 验证 , 对 上 面 选取 的 Pm 猜测 的 一 切 倒 首 时间, 方程 (6.33)、 方程 (6.34) 
和 方程 (6.35) 都 满足 , 由 此 推出 它们 都 是 极限 概率 . 因此 , 我 们 证 明了 在 此 两 条 服务 


线 上 的 稳 态 人 数 是 独立 的 , 在 服务 线 i 的 人 数 正如 具有 到 达 速 率 X, 指数 服 问 速率 
jisi==1,2 的 一 个 M / M /1 系统 (参见 例 6.14). 
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考虑 一 个 连续 时 间 的 马尔 可 夫 链 , 它 处 在 一 个 状态 的 平均 时 间 对 一 切 状 态 都 相 
同 . 即 假设 对 一 切 状 态 i 有 vi = v. 在 这 种 情形 下 , 由 于 在 一 次 访问 期 间 在 每 个 状态 
所 处 的 时 间 以 速率 v 指数 地 分 布 , 由 此 推出 , 如 果 我 们 以 N(t) 记 直 至 时 刻 t 为 止 状 
态 转移 的 次 数 , 那么 {N(b),t> 0} 是 速率 为 v 的 泊 松 过 程 . 

为 了 计算 转移 概率 Pi(t), 我 们 可 以 取 条 件 于 Nb): 
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Pi(t)= P{X(t) =jIX(0) = 
= DP{X(t) =jIX(0) =i,N(t) =n}P{N(t) =n|X(0) =} 
n=0 


= PPX =X(0) = ND) =nje—" 
n=0 M 
现在 , 直至 时 刻 为 止 已 经 有 次 转移 , 这 告诉 我 们 某 些 关于 在 前 n 个 被 访问 的 状 
态 中 的 每 一 个 上 所 处 的 时 间 , 但 是 由 于 在 每 一 个 状态 停留 的 时 间 的 分 布 对 一 切 状 态 
是 相同 的 , 由 此 推出, 知道 了 N(t) = n 并 没有 给 我 们 有 关 哪些 状态 已 访问 的 信息 . 
因此 
PX =X(0) = NO =) = 
其 中 到 正 是 具有 转移 概率 忆 的 离散 时 间 的 马尔 可 夫 链 的 步 转移 概率 . 所 以 当 
ww Eu 时 
PW = Pye" (636) 
n=0 
从 计算 的 角度 来 说 , 方程 (6.29) 常常 很 有 用, 因为 它 使 我 们 通过 取 一 个 部 分 和 , 而 后 
计算 (利用 转移 概率 矩阵 的 矩阵 乘法 ) 有 关 的 n 步 概率 P 以 近似 Pi() 
然而 ,方程 (6.29) 的 可 应 用 性 似乎 十 分 有 限 , 因为 它 假定 了 vi = w 最 终 用 多 许 
状态 到 它 自己 的 一 个 虚拟 转移 的 诀窍 使 大 部 分 马尔 可 夫 链 可 以 秆 入 这 个 形式 中 . 
为 了 看 它 如 何 运作 , 考虑 w 都 是 有 界 的 一 个 马尔 可 夫 链 ,而 令 是 一 个 任意 的 数 ， 
满足 
vi<v， 对 一 切 i (6.37) 
现在 , 当 处 在 状态 :时 , 过 程 实际 上 以 速率 i 离开 . 但 是 这 等 价 于 假设 转移 以 速率 。 
发 生 , 但 是 只 有 w/v 部 分 的 转移 是 真实 的 (从 而 实际 转移 以 速率 vi 发 生 ), 而 余下 的 
1 w/v 部 分 是 虚拟 的 转移 , 它 使 过 程 留 在 状态 i 换 句 话说 , 任意 满足 条 件 (6.37) 
的 马尔 可 夫 链 可 以 想象 为， 一 个 以 速率 v 的 指数 时 间 处 在 状态 i, 然后 以 概率 P; 转 
移 到 7 的 过 程 , 其 中 


1-， j=i 
‘i nn (6.38) 
Py 
因此 , 从 方程 (6.36) 得 : 转移 概率 可 以 由 
Py(t) = Poe" Ey 


n=0 


计算 , 其 中 P; 是 对 应 于 方程 (6.38) 的 n 步 转移 概率 . 这 种 从 每 个 状态 出 发 到 它 自 
身 的 转移 使 速率 均匀 化 的 技术 , 称 为 均匀 化 . 
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例 6.23 ”我 们 重新 考察 例 6.11, 它 将 工作 的 一 台 机 器 (或 者 在 运行 , 或 者 不 在 运行 ) 
建 模 为 一 个 两 个 状态 的 连续 时 间 的 马尔 可 夫 链 , 它 具 有 


P= Pio=1, vo=A, =k 


令 v=A 和 + 上 面 的 均匀 化 版 本 是 考虑 一 个 连续 时 间 的 马尔 可 夫 链 ， 它 具 有 


Po= -Et-=1-Pn,， Po= 


= =1-Pu, v=A+p, i=1,2 


了 - 

入 十 几 
因为 Poo = Pio, 由 此 推出 , 无 论 现在 的 状态 是 什么 , 转移 到 状态 0 的 概率 等 于 

A/(A+ 咱 , 因为 类 似 的 结果 对 于 状态 1 是 正确 的 , 由 此 推出 n 步 转移 概率 为 


[a » 
Ln 
| 
il A+p’ 了 
因此 
= [Q+p)d" 
= 一 (A+AtLC 工 上 
Po) = 2 Pise Ot 
oo n 
| H Att (A + 4)t] 
+ nl! 
= e-(A+HA)t 一 e-CO+Hi Lt 
e +[1—e (br 
= 二 -和 -Or 
A+p 入 十 及 
类 似 地 
oo 
3 (入 十 可" 
Pi)= Phe- lt 1 ] 
n=0 
入 
= e-CA+A 一 e-CO+Ail 一 
e +[1—e ls 
a btmt 
> Mp pe 
其 余 的 概率 是 
Pt =1— Poolt) = 一 一 [1 一 e+At]， 
b1(t) bolt) xl e ] | 


Piolt)=1- Pu(t)= Rt = 


例 6.24 考虑 例 6.23 中 的 两 状态 链 , 并 且 假 设 初始 状态 是 0. 以 O(t) 记过 程 在 区 
间 (0,t) 中 处 在 状态 0 的 时 间 总 量 . 随机 变量 O(t) 常常 称 为 占 位 时 间 . 我 们 现在 计 
算 它 的 均值 . 
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如 果 令 
_ [1 车 X(s)=0 
= { 0， 若 X(s)=1 


那么 我 们 可 以 将 占 位 时 间 表 示 为 
0O(t)= [ I(s)ds 
0 

取 期 望 并 且 利 用 我 们 可 以 在 积分 号 内 取 期 望 (因为 一 个 积分 基本 上 是 一 个 和 ) 的 事 
实 , 得 到 

t t 

Elodgj] =| ElI(s)]ds =| P{X(s) =0}ds 
0 0 
二 | Pols)ds = t+ mt 一 erO+A 人 


其 中 最 后 的 等 式 得 自 对 


_4 入 —(A+p)s 
NR Ee 


求 积分 (对 于 E[O(t)] 的 另 一 个 推导 , 参见 习题 45.) 图 


6.9 “计算 转移 概率 


对 于 任意 的 一 对 状态 i 和 j, 令 
r= 若 i##j 
可 -ww 车 i=j 


Poo(s) = 


用 这 个 记号 , 我 们 可 以 改写 科 尔 莫 戌 罗 夫 向 后 方程 
而 的 = D qin Pes(t) — viPi(t) 
ei 
以 及 向 前 方程 
Pi(t) = DgqrsPix(t) — viPii(t) 
en 
为 
Pi(t) = PrP (向 后 ) 
的 = PrPxlt) (向 前 ) 


当 我 们 使 用 矩阵 记号 时 , 这 个 表示 特别 地 清楚 . 定义 矩阵 R, P(t), P'(t), 令 这 些 矩 
阵 在 i 行 j 列 的 元 素 分 别 为 rij, Pi(t), Ps(t)， 因 为 向 后 方程 表明 矩阵 P'(t) 的 在 
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i 行 j 列 的 元 素 可 以 由 矩阵 及 的 i 行 乘 以 矩阵 P(t) 的 j 列 得 到 , 它 等 价 于 矩阵 
方程 

P'(t) = RP(t) (6.39) 
类 似 地 , 向 前 方程 可 以 写成 

P'(t)= P(t)R (6.40) 
现在 , 正如 数量 的 微分 方程 f(t) = cf(t)( 或 者 , 等 价 地 , f(t) = f(t)c) 的 解 是 f(t) = 
f(0)e"， 可 以 证 明和 矩阵 微分 方程 (6.39) 和 (6.40) 的 解 为 P(t) = P(0)e 碟 由 于 
PP(0) = 了 单位 矩阵 ), 所 以 

P(t) = eR (6.41) 

其 中 矩阵 e 巴 由 

eR = De (6.42) 


定义 , 而 R" 是 RR (矩阵 ) 自 乘 次 . 
用 方程 (6.42) 直接 计算 P(t) 效率 极 低 , 这 有 两 个 原因 , 首先 , 矩阵 R 既 包 含 正 
的 元 素 , 又 包含 负 的 元 素 (对 角 线 外 的 元 素 是 qij, 而 第 i 个 对 角 线 元 素 是 一 vi), 当 
我 们 计算 R 的 宕 时 , 存在 计算 机 的 伟人 误差 问题 . 第 二 , 我 们 通常 必须 计算 无 穷 项 
的 和 (6.42) 的 许多 项 以 便 得 到 好 的 近似 . 然而 , 存在 某 种 间接 的 途径 , 使 我 们 能 够 利 
用 关系 (6.41) 有 效 地 近似 矩阵 P(t). 我 们 现在 介绍 两 个 这 样 的 方法 . 
近似 方法 1 与 其 用 (6.42) 计算 e 马 , 不 如 用 恒等式 
ZN 
= lim, (1+3) 
的 矩阵 等 价 式 , 妈 ， 
eR = lim, ( + nt) 


于 是 , 如 果 取 n 为 2 的 短 , 例如 说 , n = 2*, 那么 我 们 可 以 用 计算 甜 阵 RM = I+ Rt/n 
的 次 短 近 似 P(t), 这 可 以 由 大 个 矩阵 乘法 来 完成 (首先 由 M 乘 上 它 自己 得 到 
MM?, 然后 将 它 乘 上 它 自 己 得 到 M”, 如 此 等 等 ). 此 外 , 由 于 只 有 尽 的 对 角 线 元 素 是 
负 的 (而 单位 矩阵 的 对 角 线 元 素 都 是 1), 通过 选取 足够 大 的 n, 我 们 可 以 保证 矩阵 
T+ Rt/n 的 所 有 元 素 都 非 负 . 

近似 方法 2 第 二 个 近似 e 忌 的 方法 用 恒等式 


em ( 所 RE) 加 (r-a) 对 大 的 n 
从 而 


332 第 6 章 连续 时 间 的 马尔 可 夫 链 


因此 , 如 果 我 们 再 选取 n 为 2 的 一 个 大 的 告 , 例如 说 , n = 2*, 我 们 可 以 近似 已 ()， 
首先 通过 计算 矩阵 工 - Rt/n 的 道 , 计算 这 个 矩阵 的 n 次 短 (通过 用 上 个 矩阵 乘法 ). 
可 以 证 明和 矩阵 (I 一 Rt/n)! 将 只 有 非 负 元 素 . 

注 上 面 的 两 种 近似 P(t) 的 计算 方法 都 有 概率 解释 (参见 习题 41 和 习题 42). 


习 题 


1. 一 个 有 机 体 的 总 体 由 雄性 与 峻 性 成 员 组 成. 在 一 个 小 的 群体 中 , 某 个 特定 的 雄性 可 能 与 一 个 
特定 的 肉 性 以 概率 和 h + o(h) 在 任意 长 度 为 h 的 时 间 区 间 里 交配 . 每 次 交配 立即 等 可 能 产 
生 一 个 雄性 或 肉 性 的 后 代 . 以 Ni(t) 和 N2(t) 分 别 记 在 时 刻 t 总 体 中 的 雄性 与 峻 性 的 个 数 . 
推导 连续 时 间 的 马尔 可 夫 链 {Ni(t),N2(t)} 的 参数 , 即 6.2 节 中 的 参数 vi, Pij. 

“2. 假设 一 个 单 细胞 的 有 机 体 可 以 处 在 状态 A 或 状态 B. 处 在 状态 A 的 个 体 将 以 指数 速率 a 
转变 到 状态 B, 处 在 状态 B 的 个 体 将 以 指数 速率 6 分 裂 为 两 个 在 状态 A 的 新 个 体 ， 对 这 
样 的 有 机 体 的 总 体 定义 一 个 合适 的 连续 时 间 马 尔 可 夫 链 , 并 且 确 定 这 个 模型 的 合适 的 参数 . 

3. 考察 两 台 由 某 个 修理 工 维修 的 机 器 .机 器 i 在 失效 前 运行 了 速率 为 yi 的 一 个 指数 时 间 ， 
i = 1,2. 修理 时 间 (对 任 一 台 机 器 ) 是 速率 为 / 的 指数 随机 变量 . 我 们 能 否 将 它 分 析 为 生 
灭 过 程 ? 如 果 是 , 参数 是 什么 ?如果 不 是 , 我 们 应 如 何 分 析 它 ? 

“4. 潜在 顾客 按 速率 为 和 的 泊 松 过 程 到 达 一 个 单 服务 线 的 服务 站 . 然而 , 如 果 到 达 者 发 现在 系 
统 中 已 经 有 n 个 人 , 那么 他 将 以 概率 an 进入 系统 . 假定 一 个 速率 为 4 的 指数 服务 时 间 , 将 
它 建 模 为 一 个 生 灭 过 程 , 并 且 确 定 出 生 率 与 死亡 率 . 

5. 在 一 个 总 体 中 有 N 个 个 体 , 它们 中 的 一 些 受到 某 种 感染 , 其 传播 方式 如 下 : 这 个 总 体 中 的 


两 个 个 体 之 间 按 速率 为 和 的 泊 松 过 程 接触 . 每 一 次 接触 等 可 能 地 涉及 在 总 体 中 的 (") 对 


个 体 中 的 任意 一 对 . 如 果 一 次 接触 涉及 一 个 受 感染 的 与 一 个 没有 受 感染 的 个 体 , 那么 没有 感 
染 者 将 以 概率 p 变 成 受 感染 者 . 一 旦 受到 感染 , 该 个 体 始终 保持 受 感染 . 以 X(t) 记 总 体 在 
时 刻 t 受 感染 成 员 的 个 数 . 
(a) {X(t),t > 0} 是 连续 时 间 的 马尔 可 夫 链 吗 ? 
(b) 确定 它 的 类 型 
(c) 开始 只 有 一 个 受 感染 的 个 体 , 问 直 到 所 有 的 成 员 都 受 感染 的 期 望 时 间 是 多 少 ? 
6. 考虑 一 个 具有 出 生 率 Xi = (i 十 1) 和 (i > 0) 与 死亡 率 ji = iy (i > 0) 的 生 灭 过 程 
(a) 确定 从 状态 0 到 状态 4 的 期 望 时 间 . 
(b) 确定 从 状态 2 到 状态 5 的 期 望 时 间 . 
(c) 确定 (a) 和 (b) 中 的 方差. 

“7. 个 体 按 速率 为 和 的 泊 松 过 程 加 入 一 个 俱乐部 . 每 个 新 成 员 变 成 俱乐部 会 员 必须 通过 人 个 连 
续 的 阶段 . 通过 每 个 阶段 的 时 间 是 速率 为 上 的 指数 随机 变量 . 以 Ni(t) 记 在 时 刻 t 恰好 已 
通过 i 个 阶段 的 俱乐部 成 员 的 人 数 , i = 1,… ,一 1. 此 外 , 令 N(t) = (Ni(t), N2(t),…， 
Ne—1(t)). 

(a) {N(b,t > 0} 是 连续 时 间 的 马尔 可 夫 链 吗 ? 


"11. 


12. 


13. 


14. 
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(b) 如 果 是 , 给 出 无 穷 小 转移 速率 . 即 对 于 任意 状态 m = (mi，… ,nx-1) 给 出 可 能 的 下 一 
个 状态 与 它们 的 无 穷 小 速率 


,考察 两 台 机 器 , 两 者 都 有 均值 为 1/ 和 的 指数 寿命 有 一 个 修理 工 可 以 以 指数 速率 / 服务 于 


机 器 . 建立 科 尔 莫 戈 罗 夫 向 后 方程 , 不 需要 求解 . 


.具有 参数 Xn = 0 和 jn = Mn > 0) 的 生 灭 过 程 , 称 为 纯 灭 过 程 . 求 Piy(t). 
. 考察 两 台 机 器 . 机 器 i 运行 了 速率 为 Xi 的 指数 时 间 后 失效 . 它 的 修理 时 间 是 速率 为 lu 的 


指数 时 间 , i = 1,2. 机 器 彼此 独立 地 运行 . 定义 一 个 联合 地 描述 两 台 机 器 的 条 件 的 4 个 状 
态 的 马尔 可 夫 链 ， 用 独立 性 的 假定 计算 这 个 马尔 可 夫 链 的 转移 概率 , 然后 验证 转移 概率 满 
足 向 后 方程 与 向 前 方程. 
考虑 一 个 尤 尔 过 程 , 开始 有 一 个 个 体 , 即 假设 X(0) = 1. 以 Ti 记过 程 从 总 体 大 小 为 i 到达 
大 小 为 i 十 1 所 用 的 时 间 . 
(a) 论证 五 (= 1,…,j) 是 分 别 以 认 为 速率 的 独立 指数 随机 变量 . 
(b) 以 X1,… ,Xi 记 独 立 的 指数 随机 变量 , 每 个 具有 速率 和 , 并且 将 Xi 解释 为 部 件 i 的 寿 
命 . 论证 max(X1,… ,Xi) 可 以 解释 为 
max(X1,..., Xi) 王 El 十 ez 十 … 十 司 


其 中 e1,e2，… ,6; 分 别 是 速率 为 j, (7 - 1)A……, 和 的 独立 的 指数 随机 变量 
提示 : 将 si 解释 为 在 第 i 一 1 个 和 第 i 个 失效 之 间 的 时 间 . 
(c) 用 (a) 和 (b) 论证 
P{Ti+:*+D <t}=(1-e*) 
(d) 利用 (c) 得 到 
Pylt)=(1 = Ss = =e-X(1 一 ef- 
因此 , 在 给 定 X(0) = 1 时 , X(t) 有 参数 为 p = e “的 几何 分 布 . 
(e) 现在 证 明 


Pyl) = (二 Da a 


假定 在 一 个 生物 总 体 中 的 每 个 个 体 以 指数 速率 和 出 生 , 而 以 指数 速率 A 死亡 . 此 外 , 由 于 
移民 , 存在 一 个 增长 的 指数 速率 9. 然而 , 当 总 体 的 大 小 是 N 或 更 大 时 , 不 再 允许 移民 . 

(a) 用 生 灭 过 程 建立 模型 . 

(b) 如 果 NN = 3,1 = 9 = 入 ,4 = 2, 确定 移民 受 限制 的 时 间 比 例 . 

一 个 理发 师 经 营 的 小 理发 店 最 多 能 容纳 两 个 顾客 . 潜在 顾客 以 每 小 时 3 个 的 速率 的 泊 松 过 
程 到 达 , 而 相继 的 服务 时 间 是 均值 为 1/4 小 时 的 独立 的 指数 随机 变量 . 求解 下 面 各 项 . 

(a) 在 店 中 顾客 的 平均 数 . 

(b) 进入 店 中 的 潜在 顾客 的 比例 . 

(c) 如 果 该 理发 师 工作 的 速率 快 至 两 倍 , 他 将 多 做 多 少 生意 ? 

潜在 的 顾客 以 速率 每 小 时 20 辆 车 的 泊 松 过 程 到 达 一 个 全 方位 服务 的 单个 加 油泵 的 加 油 站 . 
然而 , 顾客 只 在 不 超过 两 辆 车 在 泵 上 时 (包括 现在 正 试图 进入 的 一 辆 ) 才 进 入 加 油 站 . 假设 
服务 一 辆 车 需要 的 时 间 是 均值 为 5 分 钟 的 指数 随机 变量 
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20. 
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(a) 用 于 汽车 服务 的 服务 员 的 时 间 的 比例 是 多 少 ? 

(b) 流失 的 潜在 顾客 的 比例 是 多 少 ? 

一 个 服务 中 心 由 两 条 服务 线 组 成 . 每 条 以 平均 每 小 时 2 个 服务 的 指数 速率 工作 ， 如果 顾 客 
以 速率 每 小 时 3 个 的 泊 松 过 程 到 达 , 假定 系统 的 容量 至 多 为 3 个 顾客 

(a) 潜在 顾客 进入 系统 的 比例 是 多 少 ? 

(b) 如 果 只 有 单 服务 线 , 而 他 的 速率 快 两 倍 ( 即 = 4), (a) 的 值 是 多 少 ? 

下 面 的 问题 来 自分 子 生 物 学 . 细菌 的 表面 有 几 个 位 置 , 在 那里 接触 到 外 来 分 子 一 一 有 些 是 
可 接受 的 , 而 有 些 是 不 可 接受 的 . 我 们 考虑 一 个 特殊 的 位 置 , 假设 分 子 按 速率 为 和 的 泊 松 过 
程 到 达 该 位 置 . 在 这 些 分 子 中 , 以 比例 a 是 可 接受 的 . 不 可 接受 的 分 子 在 该 位 置 按 参数 为 /1 
的 指数 分 布 停留 一 个 时 间 长 度 , 而 可 接受 的 分 子 在 该 位 置 停留 参数 为 ia 的 指数 时 间 . 一 个 
到 达 的 分 子 被 接触 只 当 这 个 位 置 没有 其 他 分 子 . 问 这 个 位 置 被 可 接受 的 分 子 (不 可 接受 的 
分 子 ) 占据 的 时 间 的 百分比 是 多 少 ? 

每 次 一 台 机 器 修复 后 , 保持 运行 速率 为 和 的 指数 分 布 时 间 . 然后 失效 , 并 且 其 失效 有 两 种 
类 型 . 若是 第 一 类 失效 , 则 修复 它 的 时 间 是 速率 为 ja 的 指数 时 间 ; 若是 第 二 类 失效 , 则 修复 
它 的 时 间 是 速率 为 jz 的 指数 时 间 . 每 次 失效 独立 于 机 器 到 失效 所 用 的 时 间 , 第 一 类 失效 的 
概率 是 p, 而 第 二 类 失效 的 概率 是 1 一 p. 由 第 一 类 失效 引起 机 器 不 能 运行 的 时 间 比 例 是 多 
少 ? 由 第 二 类 失效 引起 机 器 不 能 运行 的 时 间 比 例 是 多 少 ? 机 器 正常 运行 的 时 间 比 例 是 多 少 ? 
机 器 在 修复 后 运行 了 速率 为 和 的 指数 时 间 , 然后 失效 . 失效 时 修理 过 程 就 开始 .修理 过 程 
经 过 上 个 不 同 的 阶段 相继 地 进行 . 首先 必须 进行 阶段 1 修理 , 然后 阶段 2, 如 此 等 等 . 完成 
这 些 修理 的 时 间 是 独立 的 , 阶段 i 需 用 速率 为 jv (i = 1,……, 大 ) 的 指数 时 间 . 

(a) 机 器 进行 阶段 i 修理 的 时 间 比 例 是 多 少 ? 

(b) 机 器 运行 的 时 间 比 例 是 多 少 ? 

一 个 修理 工 照看 机 器 1 和 2. 每 次 修复 后 , 机 器 i 保持 正常 运行 一 个 速率 为 和 (i = 1,2) 的 
指数 时 间 . 当 机 器 i 失效 时 需要 以 速率 为 js 的 指数 分 布 的 工作 量 完成 它 的 修理 . 在 机 器 1 
失效 时 修理 工 总 是 先 修理 它 . 例如 , 若 正在 修理 机 器 2 时 机 器 1 突然 失效 , 则 修理 工 将 立刻 
停止 修理 机 器 2, 而 开始 修理 机 器 1. 问 机 器 2 失效 的 时 间 比 例 是 多 少 ? 

有 两 台 机 器 , 其 中 一 台 作 备用 . 一 台 工作 的 机 器 将 运行 速率 为 和 的 指数 时 间 , 然后 失效 . 此 
时 , 如 果 另 一 台 在 可 工作 状态 , 则 立刻 用 来 代替 它 , 而 它 则 送 入 修理 车 间 . 修理 工作 只 由 一 
个 人 进行 , 他 用 速率 为 4 的 指数 分 布 时 间 修 复 一 台 失 效 的 机 器 . 如 果 修理 工 闲 着 , 则 新 失效 
的 机 器 马上 进行 修理 . 如 果 修 理工 忙 荐 , 则 等 到 另 一 台 机 器 修复 , 此 时 新 修复 的 机 器 进入 运 
行 , 再 开始 修理 另 一 台 . 开始 时 两 台 机 器 都 在 可 工作 条 件 , 求 直 到 两 台 都 进入 修理 车 间 的 时 
间 的 

(a) 期 望 值 . 

(b) 方差 . 

(c) 有 一 台 可 工作 的 机 器 的 长 程 时 间 比 例 是 多 少 ? 

假设 在 习题 20 中 两 台 机 器 都 不 能 运行 时 第 二 个 修理 工 就 应 召 修理 新 失效 的 机 器 . 假设 所 
有 的 修复 时 间 保持 速率 为 上 的 指数 随机 变量 ， 现 在 求 至 少 有 一 台 机 器 可 工作 的 时 间 的 比 
例 , 将 你 得 到 的 答案 与 习题 20 中 得 到 的 作 比 较 . 
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顾客 按 速率 为 和 的 泊 松 过 程 到 达 一 条 单 服务 线 的 排队 系统 ， 这 条 服务 线 有 速率 为 / 的 指 
数 服务 时 间 然而 , 发 现 系统 中 已 有 n 个 顾客 的 到 达 者 , 只 以 概率 1/(n + 1) 加 入 系统 . 即 这 
样 的 到 达 者 将 以 概率 n/(n + 1) 不 进入 系统 .证 明 在 系统 中 的 顾客 数 的 极限 分 布 是 均值 为 
和 4h 的 泊 松 分 布 . 

一 个 车 间 有 3 台 机 器 和 2 个 修理 工 . 机 器 在 失效 前 工作 的 时 间 以 均值 10 指数 地 分 布 ， 如 
果 一 个 修理 工 修复 一 台 机 器 使 用 的 时 间 以 均值 8 指数 地 分 布 ， 那么 上 

(a) 不 在 使 用 的 机 器 的 平均 台数 是 多 少 ? 

(b) 两 个 修理 工 者 在 忙 的 时 间 比 例 是 多 少 ? 

考察 一 个 出 租车 的 车 站 , 其 中 出 租车 与 顾客 分 别 按 速率 为 每 分 钟 1 辆 与 每 分 钟 2 人 的 泊 松 
过 程 到 达 无 论 有 多 少 出 租车 在 那里 ,新 来 的 出 租车 都 会 等 待 ， 然 而 , 若 顾客 到 来 发 现 没有 
出 租车 就 会 离 去 . 求 

(a) 在 等 竺 的 出 租车 的 平均 数 . 

(b) 到 达 的 顾客 措 到 出 租车 的 比例 . 

顾客 按 速率 为 \ 的 泊 松 过 程 到 达 由 单个 服务 员 操作 的 服务 站 ， 后 者 以 指数 速率 ia 服务 . 
在 服务 结束 后 , 顾客 进入 以 指数 速率 a 服务 的 第 二 个 系统 .这 样 的 系统 , 称 为 事 行 排队 条 
统 , 或 序 页 排队 系统 ， 假 定 A < ji = 1,2. 确定 极限 概率 . 

提示 ， 试探 形 如 Po,m = Ca"Pm 的 解 , 确定 C,a 

考虑 一 个 处 在 稳 态 ( 即 在 长 时 间 后 ) 的 遍历 的 M/M/s 排队 系统 , 论证 现在 在 系统 中 的 人 数 
独立 于 过 去 的 离开 时 刻 的 序列 . 即 例如 , 知道 已 经 在 2、3、5 和 10 个 时 间 单位 前 有 顾客 离 
开 , 并 不 影响 现在 在 系统 中 人 数 的 分 布 

在 M/M/s 排队 系统 中 , 如 果 你 允许 服务 速率 依赖 于 系统 中 的 人 数 (但 是 , 以 保证 系统 为 遍 
历 的 方式 ), 你 认为 输出 过 程 是 什么 ? 当 服务 速率 / 保持 不 变 , 但 是 A > sk 时 , 它 又 如 何 ? 
如 果 {X(t)}》 和 {Y(b} 是 独立 的 连续 时 间 的 马尔 可 夫 链 ， 两 者 都 是 时 间 可 逆 的 , 证 明 
{X(t),Y(6} 也 是 一 个 时 间 可 进 的 马尔 可 夫 链 ， 

考察 一 组 n 台 机 器 和 服务 于 这 些 机 器 的 单个 修理 设备 假设 当 机 器 i (i = 1,…,n) 失效 
时 , 修复 工作 量 是 速率 J 的 指数 分 布 . 又 假设 等 可 能 地 修理 所 有 失效 的 机 器 . 即 当 共有 
个 失效 的 机 器 时 , 每 个 失效 机 器 在 每 个 单位 时 间 以 速率 1/k 接受 修理 工作 .如 果 总 共有 
台 在 工作 的 机 器 , 包括 机 器 那么 机 器 i 以 瞬时 速率 Xi/r 失效 

(a) 确定 合适 的 状态 空间 使 上 述 系统 能 分 析 为 连续 时 间 的 马尔 可 夫 链 

(b) 给 出 肯 时 转移 速率 ( 即 给 出 gj) 

(G) 写 出 时 间 可 近 性 方程 

(d) 求 极限 概率 , 并 且 证 明 这 个 过 程 是 时 间 可 闻 的 . 

考察 一 个 有 顶点 1,2…,n 和 ( 2 ) 条 弧 (i,)(i 关 刻 ij 二 1…,n) 的 一 个 图 (适用 的 定 
义 参见 3.6.2 节 ). 假设 一 个 粒子 沿 这 个 图 如 下 地 移动 ， 事件 按 速 率 为 Ni 的 独立 泊 松 过 程 
沿 着 弧 (i,j) 发 生 ， 一 个 沿 着 弧 (i,j) 发 生 的 事件 使 这 个 弧 被 激活 . 如 果 在 弧 (i,j) 被 激活 
的 时 刻 , 粒子 在 项 点 那么 它 立刻 移动 到 硕 点 了 (ip = 1,…,n). 以 号 记 粒 子 在 硕 点 
的 时 间 的 比例 . 证 明 已 = 1/n. 
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31. 


32. 


“33. 


34. 


35. 


36. 
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提示 : 利用 时 间 可 逆 性 . 
总 共有 N 个 顾客 在 7 条 服务 线 之 间 以 如 下 方式 移动 : 接受 服务 线 i 服务 的 顾客 , 以 概率 
LV(r 一 1) 再 去 服务 线 j,j 队 i, 如 果 他 去 的 服务 线 空闲 , 则 进入 服务 ,否则 他 加 入 队列 等 候 . 
服务 时 间 都 是 独立 的 , 服务 线 i 的 服务 时 间 是 速率 为 上 的 指数 随机 变量 , i = 1,…,r. 令 状 
态 在 任意 时 间 为 向 量 (ni,… ,nr), 其 中 ns 是 服务 线 i 的 顾客 数 , i = 1，……,m, 并 imi = N. 
(a) 论证 如 果 X (tb) 是 在 时 刻 t 的 状态 , 则 {X(b,t > 0} 是 连续 时 间 的 马尔 可 夫 链 . 
(b) 给 出 这 个 链 的 瞬时 速率 . 
(c) 证 明 这 个 链 是 时 间 可 逆 的 , 并 求 它 的 极限 概率 . 
顾客 按 速率 为 和 的 泊 松 过 程 到 达 一 个 有 两 条 服务 线 的 服务 站 . 顾客 到 达 后 进入 一 个 单一 的 
队列 . 只 要 一 条 服务 线 空闲 ， 队 中 第 一 个 人 就 进入 服务 ， 服 务 线 i 的 服务 时 间 是 速率 为 ju 
的 指数 随机 变量 , i = 1, 2, 其 中 jn + ja > 入 . 一 个 到 达 者 发 现 两 条 服务 线 都 空闲 时 等 可 能 
地 进入 任意 一 条 . 对 于 这 个 模型 , 定义 一 个 合适 的 连续 时 间 的 马尔 可 夫 链 , 证 明 它 是 时 间 可 
逆 的 , 并 且 求 它 的 极限 概率 . 
考虑 两 个 具有 参数 Xi 和 Ma (i = 1,2) 的 M/M/1 排队 系统 . 假设 他 们 共用 一 个 最 多 容纳 
3 个 顾客 的 等 待 厅 . 即 只 要 一 个 到 达 者 发 现 服务 线 都 在 忙 , 并 且 有 3 个 顾客 在 等 待 厅 , 她 就 
离开 . 求 在 系统 中 有 n 个 顾客 在 队列 1, m 个 顾客 在 队列 2 的 极限 概率 . 
提示 结合 截止 的 概念 利用 习题 28 的 结果 . 
4 个 工人 共用 一 间 有 4 个 电话 的 办 公 室 . 在 任意 时 刻 每 个 工人 或 者 在 工作 , 或 者 在 打 电 话 . 
工人 1 的 每 段 在 工作 的 时 期 持续 一 个 速率 为 Ai 的 指数 分 布 时 间 , 而 每 段 在 打 电话 的 时 期 持 
续 一 个 速率 为 J 的 指数 分 布 时 间 , i = 1,2, 3, 4. 
(a) 所 有 工人 都 在 工作 的 时 间 的 比例 是 多 少 ? 

如 果 在 时 刻 t 工人 i 在 工作 , 令 Xilt) 等 于 1, 否则 令 它 等 于 0. 令 XX(t) = (Xi(t)， 

X2(t); Xs(t), Xalt)). 
(b) 论证 {六 (t),t > 0} 是 一 个 连续 时 间 的 马尔 可 夫 链 , 并 且 给 出 它 的 无 穷 小 速率 . 
(e) {六 (t)} 是 否 时 间 可 逆 ? 为 什么 ? 

现在 假设 其 中 一 个 电话 损坏 了 . 假设 想 用 电话 但 是 发 现 所 有 电话 都 在 使 用 的 一 个 工人 

开始 了 一 个 新 的 在 工作 时 期 . 
(d) 所 有 工人 都 在 工作 的 时 间 的 比例 是 多 少 ? 
考察 一 个 具有 无 穷 小 转移 速率 qi; 和 极限 概率 【已 } 的 时 间 可 逆 的 连续 时 间 的 马尔 可 夫 链 . 
以 4 记 这 个 链 的 一 个 状态 集合 , 并 且 考 虑 一 个 转移 速率 95 为 

1 看- 人 和 若 ie 4A,j# A 
六 = 


qi, 其 他 
的 新 的 连续 时 间 的 马尔 可 夫 链 , 其 中 c 是 一 个 任意 的 正常 数 . 证 明 这 个 链 是 时 间 可 逆 的 , 并 
求 它 的 极限 概率 . 
考虑 一 个 有 nn 个 部 件 的 系统 , 部 件 i 的 工作 时 间 是 速率 为 Xi 的 指数 随机 变量 , i = 1,…,n. 


然而 , 失效 时 , 部 件 i 的 修复 速率 依赖 于 有 多 少 个 失效 的 部 件 . 特别 地 , 假设 当 总 共有 大 个 
失效 的 部 件 时 , 部 件 i (i = 1,…,n) 的 瞬时 修复 率 是 a*ji. 
(a) 解释 为 什么 我 们 可 以 用 一 个 连续 时 间 的 马尔 可 夫 链 分 析 上 述 模型 . 定义 这 个 链 的 状态 
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“37. 


“38. 


“39. 


“40. 


41. 
“42. 


和 参数 . 
(b) 在 稳定 状态 , 证 明 这 个 链 是 时 间 可 逆 的 , 并 计算 它 的 极限 概率 . 
一 个 医院 接受 上 种 不 同类 型 的 病人 , 其 中 i 类 型 病人 按 速率 为 Xi 的 泊 松 过 程 到 达 , 假 
设 这 上 个 泊 松 过 程 是 独立 的 . i 类 型 病人 在 医院 停留 速率 为 /ai 的 指数 分 布 的 时 间 长 度 ， 
1 = 1 ,大 假设 每 个 i 类 型 病人 在 医院 需要 wi 个 单位 的 资源 , 而 且 如 果 一 个 新 来 的 病人 
导致 所 有 病人 的 资源 总 数 超过 数量 C, 则 医院 就 不 接受 这 个 病人 . 因此 , 医院 在 同一 个 时 间 
可 能 有 ma 个 类 型 1 病人 , na 个 类 型 2 病人 ,…, nk 个 类 型 上 病人, 当 且 仅 当 


大 
na 和 C 
i=1 


(a) 定义 一 个 连续 时 间 的 马尔 可 夫 链 以 分 析 上 述 情形 . 
对 于 (b), (c), (d), 假定 C = oo. 
(b) 若 Ni(t) 是 时 刻 上 在 系统 中 类 型 i 病人 的 人 数 , 问 {Ni(t),t > 0} 是 什么 类 型 的 过 程 ? 
它 是 时 间 可 逆 的 吗 ? 
(c) 对 于 向 量 过 程 {(N1(t),… ,Nk(t)),t > 0}, 你 能 说 些 什么 呢 ? 
(qd) 问 (e) 部 分 的 极限 概率 是 什么 ? 
对 于 余下 的 部 分 假设 C < oo 
(e) 求 (a) 部 分 的 马尔 可 夫 链 的 极限 概率 . 
(f) 类 型 i 病人 以 怎样 的 速率 准 入 ? 
(g) 病人 准 入 的 比例 是 多 少 ? 
考虑 n 条 服务 线 的 系统 , 其 中 第 i 条 服务 线 的 服务 时 间 是 速率 为 yi(i = 1,…,n) 的 指数 
随机 变量 . 假设 顾客 按 速率 为 和 的 泊 松 过 程 到 达 , 且 到 达 的 顾客 发 现 所 有 服务 线 都 在 忙 , 则 
离开 而 不 进入 系统 ， 假 设 一 个 顾客 到 达 时 发 现 至 少 有 一 条 服务 线 闲 着 , 则 他 随机 地 选取 这 
些 服务 线 中 的 一 条 接受 服务 ; 即 一 个 顾客 到 达 时 发 现 上 条 服务 线 闲 着 ， 则 等 可 能 地 选取 这 
此 条 服务 线 中 的 任意 一 条 . 
(a) 定义 一 个 连续 时 间 的 马尔 可 夫 链 以 分 析 上 述 情 形 . 
(b) 证 明 此 链 是 时 间 可 逆 的 . 
(c) 求 极限 概率 . 
假设 在 习题 38 中 一 个 进入 系统 的 顾客 接受 闲 着 的 时 间 最 短 的 服务 线 服务 . 
(a) 定义 一 些 状态 以 用 一 个 连续 时 间 的 马尔 可 夫 链 分 析 这 个 模型 . 
(b) 证 明 这 个 链 是 时 间 可 逆 的 . 
(c) 求 极限 概率 . 
考察 一 个 状态 为 1,… ,n 的 连续 时 间 的 马尔 可 夫 链 , 在 每 次 访问 时 , 以 速率 为 w 的 指数 时 
间 停 留 在 状态 i, 然后 等 可 能 地 转向 其 余 n 一 1 个 状态 中 的 任意 一 个 . 
(a) 这 个 链 是 时 间 可 逆 的 吗 ? 
(b) 求 它 在 每 个 状态 停留 时 间 的 长 程 比例 . 
证 明 例 6.22 中 的 极限 概率 满足 方程 (6.33)、 方程 (6.34) 和 方程 (6.35). 
解释 在 例 6.22 中 , 为 何 我 们 可 以 在 分 析 之 前 知道 在 服务 线 i 有 j 个 顾客 的 极限 概率 是 
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(A/pi)7(1 一 和 /pn),i = 1,2,j > 0. (在 稳 态 时 服务 线 的 顾客 数 是 否 独立 未 知 .) 

“43. 考察 一 个 有 3 条 服务 线 的 串 行 排队 系统 , 顾客 按 速率 A 的 泊 松 过 程 到 达 服 务 线 1. 在 完成 
服务 线 1 的 服务 后 转向 服务 线 2; 在 完成 服务 线 2 的 服务 后 转向 服务 线 3; 在 完成 服务 线 
3 的 服务 后 离开 系统 .假定 在 服务 线 i 的 服务 时 间 是 速率 为 yi(i = 1, 2, 3) 的 指数 随机 变 
基 . 利用 猜测 倒 北 链 来 求 系统 的 极限 概率 , 然后 验证 你 的 猜测 . 

44. 对 于 习题 3 中 的 连续 时 间 的 马尔 可 夫 链 , 介绍 一 个 均匀 化 的 版 本 . 

45. 在 例 6.24 中 , 我 们 用 开始 在 状态 0 的 两 状态 的 连续 时 间 的 马尔 可 夫 链 , 计算 了 直至 时 刻 上 
为 止 在 状态 0 的 平均 占 位 时 间 m(t) = E[O(t)]. 另 一 个 得 到 这 个 量 的 途径 是 推导 它 的 一 个 
微分 方程 . 


(a) 证 明 

m(t+h) =m(t) + Poo(t)h + o(h) 
(b) 证 明 

m= + i je 
(0) 求解 m(b), 


46. 令 O(t) 是 两 状态 的 连续 时 间 的 马 可 尔 夫 链 在 状态 0 的 占 位 时 间 . 求 E[O(t)|X(0) = 1]. 
47， 考虑 两 状态 的 连续 时 间 的 马尔 可 夫 链 . 开始 过 程 处 于 状态 0, 求 Cov(X(s), X(t)). 
48. 以 Y 记 独 立 于 连续 时 间 的 马尔 可 夫 链 {X(t)} 的 一 个 速率 为 A 的 指数 随机 变量 ,而 令 


Pi; = P{X(Y)=jIX(0) = 
(a) 证 明 


二 1 从 
Puy= x 于 Fw 十 页 0 
其 中 当 i= 7 时 65 是 1, 当 i7 时 65 是 0. 
(b) 证 明 上 述 的 一 组 方程 的 解 由 五 = (IT 一 责 / 入 )-: 给 出 , 其 中 五 是 分 量 为 Pij 的 矩阵 , 工 
是 单位 矩阵 , 而 RR 是 在 6.9 节 中 指定 的 矩阵 . 
(ce) 现在 假设 国 ，…, Yn 是 独立 的 速率 为 入 的 指数 随机 变量 , 它们 独立 于 {X(t)}. 证 明 
P{X( 玫 十 … 十 钦 ) =jIX(0) = 
等 于 矩阵 五" 在 i 行 了 列 的 元 素 . 
(d) 解释 上 述 结论 与 在 6.9 节 中 的 近似 方法 2 的 关系 . 
“49. (a) 证 明 在 6.9 节 中 的 近似 方法 1 等 价 于 用 使 vt = n 的 一 个 值 v 使 连续 时 间 的 马尔 可 夫 
链 均匀 化 ,然后 用 P35" 近似 Pij(t). 
(b) 解释 为 什么 上 述 方法 将 得 到 一 个 良好 的 近似 . 
提示 : 均值 为 n 的 泊 松 随机 变量 的 标准 差 是 什么 ? 
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第 7 章 更 新 理论 及 其 应 用 


7.1 引 言 


我 们 已 经 看 到 泊 松 过 程 是 一 个 计数 过 程 , 它 的 相继 事件 之 间 的 时 间 是 有 相同 指 
数 分 布 的 独立 随机 变 基 . 一 种 可 能 的 推广 是 考虑 一 个 计数 过 程 , 其 两 次 相继 事件 之 
间 的 时 间 是 独立 同 分 布 的 随机 变量 . 这 样 的 计数 过 程 , 称 为 更 新 过 程 

令 {NN(t),t > 0} 是 一 个 计数 过 程 , 而 以 Xn 记 这 个 过 程 的 第 n 一 1 个 和 第 nn 个 
事件 之 间 的 时 间 , n > 1. 
定义 7.1 ”如 果 非 负 随 机 变 基 列 {Xi,X2,…} 是 独立 同 分 布 的 , 那么 计数 过 程 
{NN(t),t > 0} 称 为 更 新 过 程 . 

于 是 , 一 个 更 新 过 程 是 一 个 计数 过 程 , 其 直到 第 一 次 事件 发 生 的 时 间 有 某 个 分 
布 F, 第 一 个 和 第 二 个 事件 之 间 的 时 间 独 立 于 第 一 个 事件 的 时 间 , 并 且 有 同样 的 分 
布 已 以 此 类 推 . 当 一 个 事件 发 生 时 , 我 们 说 发 生 了 更 新 . 

举 一 个 更 新 过 程 的 例子 . 假设 我 们 有 无 穷 多 个 灯泡 , 它们 的 寿命 是 独立 同 分 布 
的 . 再 假设 在 某 个 时 间 我 们 使 用 一 个 灯泡 , 而 当 它 失效 时 , 就 立刻 换 上 一 个 新 的 . 在 
这 些 条 件 下 , 用 N(t) 表示 直到 时 刻 t 为 止 失 效 的 灯泡 个 数 , 则 {N(b,t > 0} 是 一 个 
更 新 过 程 . 

对 于 到 达 间 隔 时 间 为 X1, X2,… 的 一 个 更 新 过 程 , 令 

的 二 让 本 元 2 


ti=1 
即 $1 = Xi 是 第 一 次 更 新 的 时 间 ; 52 = Xi + X2 是 第 一 次 更 新 的 时 间 加 上 第 一 次 
与 第 二 次 更 新 之 间 的 时 间 , 即 52 是 第 二 次 更 新 的 时 间 . 一 般 地 , 用 Sn 记 第 n 次 更 
新 的 时 间 ( 见 图 7.1). 
EE me mat 关 
0 5, 5， 时 间 
图 7.1 更 新 和 到 达 间 隔 时 间 


我 们 将 以 已 记 到 达 间 隔 分 布 , 而 为 了 避免 平凡 情形 , 我 们 假定 F(0) = P{Xn = 
0} < 1. 此 外 , 我 们 令 


p=E[Xn], n>1 
是 相继 更 新 之 间 的 平均 时 间 . 由 X 的 非 负 性 并 且 X 不 恒 等 于 0 推出 人 > 0. 
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我 们 想 要 回答 的 第 一 个 问题 是 , 在 总 其 为 有 限 的 时 间 中 , 是 否 可 能 有 无 穷 多 个 
事件 发 生 . 即 对 于 t 的 某 个 (有 限 的 ) 值 , N(t) 能 否 是 无 穷 ? 为 了 说 明 这 不 可 能 发 
生 , 首先 注意 到 , 因为 S" 是 第 n 次 更 新 的 时 间 , 故 N(t) 可 以 写成 

N(t) = max{n: Sn < t} ty 
为 了 弄 明白 方程 (7.1) 为 什么 成 立 , 假设 54 < t, 但 是 5s > t. 因此 , 第 4 次 更 新 已 
经 在 时 刻 t 之 前 发 生 , 但 是 第 5 次 更 新 在 上 后 面 发 生 , 或 者 换 句 话说 , 在 时 刻 上 之 前 
发 生 的 更 新 次 数 N(t) 必须 等 于 4. 现在 , 利用 强大 数 定律 , 由 此 推出 以 概率 1 有 


Sn 
mm 当 n 一 co 时 


但 是 , 由 于 A > 0, 这 意味 着 , 当 n 一 co 时 5n 必须 趋向 无 穷 . 于 是 , 至 多 只 有 有 限 
个 nn, 使 Sn 小 于 或 等 于 也 因此 由 方程 (7.1) 推出 N(t) 必须 有 限 . 
然而 , 虽然 对 于 每 个 t,N(t) < co, 下 式 以 概率 1 成 立 : 
N(oo) 三 dm N(t) 一 oo 
这 是 由 于 发 生 的 更 新 总 数 N(co) 可 能 是 有 限 的 唯一 途经 , 是 到 达 间 隔 之 一 是 无 穷 
的 . 所 以 
P{N(eo) < co} = P{Xn = 00, 对 于 某 个 n} 


去 站 人 ex = oo}} < Dro =oo}=0 


7.2 NG 的 分 布 


AN(t) 的 分 布 至 少 在 理论 上 可 以 得 到 , 首先 注意 下 面 的 重要 关系 : 时 刻 t 之 前 的 
更 新 个 数 大 于 或 等 于 n 当 且 仅 当 第 n 次 更 新 发 生 在 时 刻 t 之 前 或 在 时 刻 t. 即 
N(t)>n®e Sn <t (7.2) 
从 方程 (7.2) 我 们 得 到 
P{N(t) =n}=P{N(t) > n} —P{N(t) > n+1} 
=P{Sn <t}—P{Snti < 
现在 由 于 随机 变量 Xi (i > 1) 是 独立 的 , 而 且 有 共同 的 分 布 F, 由 此 推出 Sn = 
21 Xi 与 Fn[F 和 它 自己 的 n 次 卷 积 (2.5.3 节 )] 同 分 布 . 所 以 , 从 方程 (7.3) 我 们 得 到 
P{N(t) =n} = Fn(t) — Fnnlt) 
例 7.1 假设 P{Xn = 讨 =p(1 -Di > 1. 即 假设 到 达 间 隔 分 布 是 几何 分 布 . 现 
在 51 = Xi 可 以 解释 为 , 当 每 次 试验 以 概率 p 成 功 时 为 了 得 到 一 次 成 功 所 必须 的 
试验 次 数 . 类 似 地 , 5 可 以 解释 为 达到 n 次 成 功 所 必须 的 试验 次 数 , 从 而 遵从 负 二 
项 分 布 


(7.3) 
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pts -| (FI)ra -ne, kn 


0, k<n 


于 是 , 由 方程 (7.3) 得 
k—l\ on k—n 四 大 一 1 mn 十 1 k—n—l 
PINO = = (hI) -> 本 pa- 
等 价 地 , 由 于 在 每 个 时 刻 n 二 1,2,.… 一 个 事件 以 概率 独立 地 发 生 ， 
PNO = 可 = (Ura pe" 四 
P{N(t) =n} 的 另 一 种 表达 式 , 可 以 通过 对 5v 取 条 件 得 到 . 这 就 导致 
PIN = = | PNG = nS, -07so0dy 
现在 , 如 果 第 n 个 事件 发 生 在 时 刻 y > 4， 那么 在 时 刻 上 之 前 只 有 少 于 n 个 事件 


另 一 方面 , 如 果 第 n 个 事件 发 生 在 时 刻 y < t, 那么 只 要 下 一 个 事件 到 达 间 隔 超 过 
t 一 y, 在 时 刻 t 就 恰 有 个 事件 . 因此 


P{N(t!) =n} =| poco >t— ys =y)}fs, (yay 
t 
=| Fe -wss.(Way 


其 中 F=1-F. 
例 7.2 如 果 下 (z) = 1 一 ex, 那么 , Sn 作为 n 个 速率 为 和 的 独立 指数 随机 变 基 的 
和 , 将 具有 伽 马 (n, 入) 分 布 . 因此 , 由 上 面 的 等 式 得 


入 mn 一 1 
EU 人 = 示 = [: A Wd 


ne At pt 六 
-mh 

esx OO 
1 3 nl! 


利用 方程 (7.2), 我 们 可 以 计算 N(t) 的 均值 m(t)， 
ml(t) = EIN(t)] = PP t) >n} = Spt{s, <}= 三 wo 


n=1 


y 


其 中 我 们 用 了 如 下 事实 : 如 果 X 是 非 负 整 数值 , 那么 
E[X] = ec- k} = EEre- k}= DEre- k} = Drex> >n} 


n=1 k= 
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函数 m(b) 是 大 家 知道 的 均值 函数 , 即 更 新 函数 
可 以 证 明 均 值 函数 m(t) 唯一 地 确定 了 更 新 过 程 . 特别 地 , 在 到 达 间 隔 分 布 忆 
与 均值 函数 m(t) 之 间 存在 一 一 对 应 . 
我 们 不 加 证 明 地 搬 述 另 一 个 重要 的 结果 是 
m(t) <o0， ”对 于 一 切 t<o0 
注 (i) 由 于 ml(t) 唯一 地 确定 了 到 达 间 隔 分 布 , 由 此 推出 泊 松 过 程 是 具有 线性 均值 
函数 的 唯一 更 新 过 程 . 
(iD 有 些 读者 可 能 想 m(t) 的 有 限 性 应 该 直接 由 N(t) 以 概率 1 有 限 的 事实 推 
出 . 然而 , 这 种 推理 是 不 成 立 的 . 考察 如 下 例子 : 令 Y 是 随机 变量 , 具有 如 
下 的 概率 分 布 EK 
Y=2" 以 术 率 (3) i 
现在 总 四 
P{Y < oo} = rc- 2 村 1= > (3 ) =: 


但 是 oo oo n 
ElY]= 5 2P{Y =2")} = 5 2" 全 全 
n=1 n=1 
因此 , 即使 Y 有 限 , 仍旧 可 能 使 ElY] = 
更 新 函数 满足 的 一 个 积分 方程 , 可 以 通过 对 首次 更 新 的 时 间 取 条 件 得 到 . 假定 
到 达 间 隔 分 布 FF 是 连续 的 , 而 且 有 密度 函数 f, 就 有 
=zINOI=| plvOPG =alyGodz (7.4) 


现在 假设 首次 更 新 发 生 的 时 刻 > 小 于 t. 由 于 更 新 过 程 概率 地 在 一 次 更 新 发 生 后 重 
新 开始 , 利用 这 一 事实 推出 , 在 时 刻 t 之 前 的 更 新 次 数 将 与 1 加 上 前 + 一 z 时 间 单位 
中 的 更 新 次 数 有 相同 的 分 布 . 所 以 
E[IN(t)|X1 =2z]=1+EIN(t-z)]， 若 z <t 
显然 , 因为 
EIN(DIX1=2z]=0， 当 z>t 
所 以 由 方程 (7.4) 得 到 


ml(t) = [ [1+m(t—z)]f(z)dz = F(t)+ [ m(t—z)f(z)dr (7.5) 


方程 (7.5) 称 为 更 新 方程 ,有 时 可 以 求解 它 得 到 更 新 函数 . 

例 7.3 ”更 新 方程 可 能 有 显 式 解 的 一 种 情况 是 到 达 间隔 分 布 是 均匀 分 布 , 例如 在 
(0,1) 上 的 均匀 分 布 . 现在 , 当 t < 1 时 , 我 们 在 这 种 情形 介绍 一 个 解法 . 对 这 样 的 t 
值 , 更 新 方程 变 成 
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ml(t) =t+ | msar=t+ | may, 用 替换 8 = 上 一 了 


对 上 述 方程 求 微 分 , 导出 
m(t)=1+m(t) 
令 h(t) = 1+m(t), 我 们 得 到 
h(t) = h(t) 
Inh(t)=t+C 
h(t) = Ket 
ml(t) = Ket—1 


由 于 m(0) = 0, 我 们 有 天 = 1, 所 以 得 到 


m(t)=e:—1, 0gt<1 [ 
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上 面 我 们 已 经 证 明了 , 当 t 趋 于 无 穷 时 , N(t) 以 概率 1 趋 于 无 穷 . 然而 , 如 果 知 
道 N(t) 趋 于 无 穷 的 速率 就 更 好 了 . 即 我 们 更 想 知道 有 关 lim-oo。 N(t)/t 的 情况 . 

作为 确定 N(t) 增长 速率 的 前 奏 , 我 们 首先 考察 随机 变量 Sw(o. 这 个 随机 变 基 
表示 什么 呢 ? 为 归纳 地 说 明 它 , 我 们 假设 , N(t) = 3, 那么 Sy() = 5s 表示 第 3 个 事 
件 发 生 的 时 间 . 因为 只 有 3 个 事件 在 t 之 前 发 生 , 53 也 代表 早 于 或 等 于 时 刻 上 的 最 
后 的 事件 发 生 的 时 间 . 事实 上 Sw() 所 表示 的 是 早 于 或 等 于 时 刻 t 的 最 后 的 更 新 的 
时 间 . 类 似 的 推理 导出 结论 : Sw(o+l 表示 时 刻 t 后 (参见 图 7.2) 的 第 一 个 更 新 的 时 
间 . 现在 我 们 已 经 做 好 证 明 下 述 命题 的 准备 


0 Swn 1! So 时 间 
图 7.2 


命题 7.1 ”以 概率 1 有 
MO 生 线 了 本 
t 及 
证 明 ”由 于 Svdo 是 早 于 或 等 于 时 刻 t 的 最 后 的 更 新 时 间 , 而 Swtb+l 是 时 刻 上 后 
的 第 一 个 更 新 时 间 , 所 以 有 


SN(t) St < SNdb+l 


从 而 
SNd) a SN(+1 


NO < NO < NC) 人 
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然而 , 由 于 Sw(w)/N(t) = 于 XXi/N(t) 是 N(t) 个 独立 同 分 布 的 随机 变量 的 平均 
值 , 由 强大 数 定律 推出 当 N(t) 一 oo 时 , Sw()/N(t) 一 几 但 是 , 因为 当 t 一 co 时 ， 
Ni) 一 co, 所 以 


另外 , 对 于 
SN(W+1 _ ( SN(D+1 ) (六 9 !) 
NE) = \NEO+I/\ NG 
由 与 上 面相 同 的 推理 以 及 
2 一 l， 当 t 一 o0 
我 们 有 Sw(w)t1/(N(t) 十 1) 一 k. 因此 
Ro ht 


由 于 t/N(t) 在 两 个 随机 变 基 之 间 , 当 t 一 co 时 其 中 每 一 个 都 收敛 到 1, 所 以 人 
(7.6) 就 得 出 结论 . 
注 (i) 即使 更 新 闻 隔 的 平均 时 间 /等 于 无 穷 时 , 上 面 的 命题 也 正确 . 在 这 种 i 
1/p4 为 0. 
(区 数 1/1 称 为 更 新 过 程 的 速率 . 
(过 ) 因为 在 更 新 间隔 的 平均 时 间 是 ,显然 , 每 几 CB 
速率 为 1. 
例 7.4 贝 弗 莉 有 一 台 使 用 单个 电池 的 收音 机 . 一 旦 电池 失效 ， 六 
电池 . 如 果 电 池 的 寿命 (小 时 ) 在 区 间 (30,60) 上 均匀 分 布 , 那么 贝 弗 莉 以 什么 速率 
更 换 电池 ? 
解 ” 若 我 们 以 N(t) 记 到 时 刻 上 为止 失效 的 电池 的 个 数 , 由 命题 7.1, 我 们 得 到 贝 弗 
莉 更 换 电池 的 速率 为 


即 长 远 来 看 , 贝 弗 莉 必须 每 45 小 时 更 换 一 次 电池 . 国 
例 7.5 “假设 在 例 7.4 中 , 贝 弗 莉 手 头 没有 任何 多 余 的 电池 , 而 每 次 失效 发 生 时 , 她 
必须 去 购买 新 电池 . 如 果 她 去 买 新 电池 花费 的 时 间 在 (0,1) 上 均匀 分 布 , 那么 贝 弗 
莉 更 换 电池 的 平均 速率 是 什么 ? 

解 ”在 这 种 情形 , 两 次 更 换 之 间 的 平均 时 间 由 /= [Zn] + ElU2] 给 出 , 其 中 上 在 
(30, 60) 上 均匀 分 布 , 而 U2 在 (0,1) 上 均匀 分 布 . 因此 


到 证 
A=45+3=455 


346 第 7 章 更 新 理论 及 其 应 用 


所 以 长 远 来 看 , 贝 弗 莉 以 速率 2/91 放 进 一 节 新 电池 . 即 她 将 在 每 91 小 时 放 进 2 个 
新 电池 . mn 
例 7.6 ”假设 潜在 顾客 按 速率 为 和 的 泊 松 过 程 来 到 只 有 一 个 服务 窗口 的 银行 . 然 
而 , 假设 潜在 顾客 只 在 服务 窗口 有 空 时 才 进 入 银行 . 即 如 果 在 银行 中 已 经 有 一 个 顾 
客 , 那么 后 来 者 并 不 进入 银行 而 转身 回 家 . 如 果 我 们 假定 进入 银行 的 顾客 在 银行 停 
留 的 时 间 是 一 个 具有 分 布 G 的 随机 变 其 , 那么 

(a) 顾客 进入 银行 的 速率 是 多 少 ? 

(b) 潜在 的 顾客 确实 进入 银行 的 比例 是 多 少 ? 
解 ”要 回答 这 些 问题 , 我 们 假设 在 时 刻 0 恰好 有 一 个 顾客 进入 银行 ( 即 我 们 定义 过 
程 在 第 一 个 顾客 进入 银行 时 开始 ). 如 果 以 pc 记 平 均 服务 时 间 , 那么 由 泊 松 过 程 的 
无 记忆 性 质 推出 , 进入 的 顾客 之 间 的 间隔 时 间 的 均值 是 


A=kG+ > 
因此 , 进入 银行 的 顾客 的 速率 将 由 
1 入 
人 TI+ We 
给 出 . 另 一 方面 , 由 潜在 的 顾客 将 以 速率 和 到 达 推 出 , 进入 银行 的 顾客 的 比例 将 由 
AI+Auc) _ 1 
A ~ 1+M\G 
给 出 , 特别 地 , 如 果 入 = 2, 而 pc = 2, 那么 5 个 顾客 中 只 有 1 个 将 确实 进入 这 个 
系统 . 
命题 7.1 的 一 个 特殊 应 用 由 下 例 给 出 . 
例 7.7 每 个 试验 以 概率 P; 出 现 的 结果 是 数 i,i= 1,…,n, -1 Pi = 1. 观察 一 系 


列 独立 的 试验 直至 同样 的 结果 连续 出 现 次 , 则 这 个 结果 被 宣布 为 游戏 的 胜利 者 . 
例如 , 如 果 == 2, 而 且 一 个 结果 的 序列 是 1, 2, 4, 3, 5, 2, 1, 3, 3, 那么 我 们 在 9 个 
试验 后 停止 , 而 且 宣布 结果 3 是 胜利 者 . 数 i (i = 1,…,n) 是 胜利 者 的 概率 是 多 少 ? 
而 期 望 试验 次 数 是 多 少 ? 

解 ”我们 先 计 算 抛掷 硬币 直至 连贯 地 出 现 上 次 正面 的 期 望 抛掷 次 数 , 称 之 为 E[T]. 
这 些 抛掷 是 独立 的 , 而 且 其 中 的 每 一 个 出 现 正面 的 概率 是 p. 通过 对 首次 出 现 反面 
的 时 间 取 条 件 , 我 们 得 到 


大 
EIT] = D0 —p)p’ 1 + EIT)) + kpt 
j=1 
求解 E[T] 得 到 


(Dj 
BT 一 上 十 一 天 Dip 
j=l 
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经 过 化 简 , 我 们 得 到 
_1+p+:+p! 1-p 
I “FD 
现在 我 们 回 到 这 个 例子 , 并 且 假 设 一 旦 一 次 游戏 的 胜利 者 被 确定 , 我 们 立刻 开 
始 进行 另 一 次 游戏 . 对 于 每 个 i, 我 们 要 确定 结果 i 赢 的 速率 . 现在 , 在 每 次 i 赢 时 ， 
一 切 又 重新 开始 , 于 是 , 由 i 赢 构成 一 个 更 新 . 因此 , 由 命题 7.1， 
1 
i 赢 的 速率 = EN’ 


其 中 Ni 记 在 结果 i 相继 赢 两 次 之 间 的 试验 ( 即 游戏 ) 次 数 . 因此 , 从 方程 (7.7) 我 们 
看 到 


(7.7) 


bE 
;高 的 速率 = (二 (7.8) 
因此 , 由 数 i 赢 的 游戏 的 长 程 比例 由 
Pr(1- P) 
_ i 局 的 速 素 1-P 
! 疡 的 比例 = 元 ”了 赢 的 速率 0 
j=1 1 


给 出 . 然而 , 由 强大 数 定律 推出 , 数 i 赢 的 长 程 比例 以 概率 1 等 于 任意 一 次 游戏 中 数 
i 赢 的 概率 , 因此 i 
P{i 赢 } = 一 
为 了 计算 游戏 的 期 本 时 间 , 我 们 首先 注意 到 


游戏 结束 的 速率 - -i 赢 的 速率 = 史 
i=1 i=1 


[由 方程 (7.8)] 


Pr P) 
Es 

现在 , 利用 当 一 次 游戏 结束 时 一 切 都 从 头 开始 , 由 命题 7.1 推出 , 游戏 结束 的 速率 等 

于 游戏 平均 时 间 的 倒数 . 因此 

[一 个 游戏 的 时 间 ] = : 


1 
游戏 结束 的 速率 Di-1(PK(1 一 Pi)/(1 一 PF)) 


命题 7.1 是 说 , 当 t 一 co 时 , 到 时 刻 t 的 平均 更 新 率 以 概率 1 收敛 到 1/k. 平均 
更 新 率 的 期 望 是 什么 ? m(t)/t 收敛 到 1/y 也 正确 吗 ? 这 个 结果 是 著名 的 基本 更 新 定理 . 
定理 7.1 基本 更 新 定理 
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如 前 , 当 = co 时 , 1/p 为 0. 

注 竺 一 看 , 基本 更 新 定理 似乎 是 命题 7.1 的 简单 推论 . 就 是 说 , 由 于 平均 更 新 率 
以 概率 1 收敛 到 1/ 必 这 不 应 该 推出 平均 更 新 率 的 期 望 收敛 到 1/j 吗 ? 然而 , 我 们 
必须 小 心 ,为 此 考察 以 下 的 例子 . 

例 7.8 令 U 是 在 (0,1) 上 均匀 分 布 的 随机 变量 , 并且 定义 随机 变 基 Y, (n > 1) 为 


0， 着 U>1 

Y= ed 
n, 着 U<l 

n 


现在 由 于 U 以 概率 1 大 于 0, 由 此 推出 , 对 于 一 切 充分 大 的 mw, Y 将 等 于 0. 即 对 于 
充分 大 的 n 使 得 U > 1/n, Yn 就 等 于 0. 因此 , 以 概率 1 有 
一 0， 当 n 一 o0. 


然而 1 1 
B=nP {0 <2}==1 


n 
所 以 , 即使 随机 变 基 列 7 收敛 到 0, 丈 的 期 望 值 也 恒 是 1. mn 

为 了 证 明基 本 更 新 定理 , 我 们 要 用 名 为 瓦尔 德 方程 的 恒等式 . 在 叙述 瓦尔 德 方 
程 之 前 , 我 们 需要 对 独立 随机 变量 序列 引进 停 时 的 概念 . 
定义 7.2 ”如 果 对 于 一 切 n= 1,2,…… 事件 {N =n} 独立 于 Xn+ubXn+2…… 那么 
非 负 整 值 随机 变革 N 对 独立 随机 变量 序列 X1,X2,… 称 为 停 时 . 

停 时 背后 的 想法 在 于 , 我 们 想象 X; 依次 被 观察 , 首先 Xi, 然后 Xz, 等 等 , 而 N 
表示 在 停止 前 它们 被 观察 的 次 数 . 因为 我 们 在 观察 Xi,……,Xn 后 停止 这 一 事件 只 
依赖 这 n 个 值 而 不 依赖 于 将 来 未 观察 的 值 , 它 必须 独立 于 将 来 的 值 . 

例 7.9 假设 X1,X2,… 是 独立 同 分 布 的 随机 变 基 列 , 且 有 
P(X =1}=p=1-P{X =0) 
其 中 p > 0. 若 我 们 定义 
和 N =min(n :Xi 十 … 十 Xn 一 7) 


1 
则 N 是 这 个 序列 的 停 时 . 假设 依次 操作 一 系列 试验 , 而 X; = 1 对 应 于 第 i 试验 的 
结果 是 成 功 , 则 N 是 当 每 次 试验 成 功 的 概率 是 p 时 , 直至 共 获得 7 从 由 各 需要 的 
立 试验 次 数 . 
例 7.10 假设 X1,X2,… 是 独立 同 分 布 的 随机 变 基 列 , 且 有 


P{Xi=1}=1/2=1-P{Xi= -1} 


若 
N=min(n: X1+:…+ Xn =1) 
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则 N 是 这 个 序列 的 停 时 . N 可 以 看 成 : 在 每 局 等 可 能 赢 或 输 1 元 的 一 个 赌 徒 在 首 

次 赢 钱 时 停止 的 停 时 . (因为 赌 徒 的 逐次 累积 收益 是 一 个 对 称 随机 游 动 , 在 第 4 章 中 

我 们 已 经 证 明了 它 是 常 返 的 马尔 可 夫 链 , 由 此 推出 P{N < co} =1.) 图 
现在 我 们 来 叙述 瓦尔 德 方程 . 

定理 7.2( 瓦 尔 德 方程 ) 若 X1,X2,… 是 独立 同 分 布 的 随机 变量 列 , 具有 有 限 的 期 

望 ELX], 而 N 是 对 此 序列 的 停 时 , 使 得 E[N] < co, 则 


E 3 zx = EIN]E[X] 
n=1 


证 明 对 n=1,2,…, 邻 


站 1,， 着 n<N 
” 【0o, 车 n>N 
注意 
DX = Xn 
n=1 n=1 
取 期 望 , 得 到 


E zx = 也 EE xx 二 到 E[Xnl1n] 
n=1 n=1 n=1 


现在 , 若 NN >n, 则 I = 1, 这 意味 着 , 若 在 观察 到 X1,…,Xn-_1 以 后 我 们 还 没有 停 
止 , 则 = 1. 但 是 , 这 殖 涵 了 In 的 值 在 观察 到 X 前 已 经 确定 , 于 是 Xn 独立 于 


In. 因此 
E[Xn1n] = E[Xn]3[In] = E[X]E[I,] 


这 说 明了 
E [= | = E[X] > El[I] 


= E[X]E 站 
= EIX]EIN] 四 


为 将 瓦尔 德 方程 应 用 到 更 新 理论 , 令 Xi, XX2,… 表示 更 新 过 程 的 到 达 间 隔 时 间 列 . 
若 我 们 每 次 观察 一 个 , 且 在 t 后 首次 更 新 时 停止 , 则 我 们 在 观察 到 X1,…, XN()+1 
后 停止, 这 说 明了 N(t) +1 对 到 达 间 隔 时 间 列 是 停 时 , 注意 , 当 且 仅 当 第 n 一 1 次 更 
新 不 超过 时 刻 t, 且 第 n 次 更 新 在 时 刻 t 以 后 , N(t) = n 一 1. 也 就 是 
NO+1=ne Nt) =n 1 Xt + Xn 1 StXi+. + Xn >t 


这 说 明了 Nb +1=n 只 取决 于 X1,…, Xn 的 值 . 
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我 们 有 瓦尔 德 方程 的 以 下 推论 . 
命题 7.2 ” 若 Xi,X2,… 是 更 新 过 程 的 到 达 问 隔 时 间 列 , 则 


E[Xa 十 … 十 XN(o+i] = E[X]EIN(t) + 1] 
这 就 是 
ElSw(w+1] = plm(t) +1] 
现在 我 们 已 经 做 好 了 证 明基 本 更 新 定理 的 准备 . 
基本 更 新 定理 的 证 明 ”因为 Sv()+1 是 + 后 的 首次 更 新 时 刻 , 由 此 推出 
SN(wW+1 = t+Y¥(t) 
其 中 Y(t) 称 为 + 后 的 超额 奉命 , 它 定义 为 从 t 直至 下 一 个 更 新 之 间 的 时 间 . 对 上 式 
取 期 望 且 应 用 命题 7.2, 推出 


Au(m(t) +1) = 上 十 EIY(b] (7.9) 
它 可 写成 
mt) 1 EY 1 
“和 村 tu t 
因为 Y(D > 0, 上 式 可 推出 下 > 二 一 二 它 说 明了 
lim En > 二 
to t Sp 


为 了 证 明 lm wz < 二 我 们 先 假设 存在 一 个 值 M 使 对 一 切 有 P{Xi < 


AM} = 1. 因为 这 蕴涵 了 Y(t) 也 必须 小 于 M, 于 是 我 们 有 E[Y(t)] < M, 所 以 
md 1 M1 


由 它 可 得 

t—o0 用 
这 就 完成 了 在 更 新 间隔 时 间 有 界 时 基本 更 新 定理 的 证 明 . 当 更 新 间隔 时 间 Xi， 
X2,…: 无 界 时 , 固定 M > 0, 且 令 Nm(t),t > 0 为 具有 更 新 间隔 时 间 min(Xi, M),i > 
1 的 更 新 过 程 . 因为 对 一 切 i 有 min(X;, M) < X;, 由 此 推出 对 一 切 t 有 Nm(t) > 
NN(t). (就 是 说 , 因为 Nm(t) 的 每 个 更 新 间隔 时 间 不 大 于 N(t) 对 应 的 更 新 间隔 时 间 ， 
直至 时 刻 t 它 必须 至 少 有 一 样 多 的 更 新 . ) 因此 EIN(t)] < EINm(t)], 这 说 明了 


im EINO -lim ELNwGO] _ 1 
i 
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其 中 等 号 来 自 , 因为 Nar(t) 的 更 新 闻 隔 时 间 是 有 界 的 . 利用 limm-os Blmin(Xi, M)] 
王 了 [Xi = 几 在 上 式 中 令 M 一 co, 我 们 得 到 
ml(t) 


1 
lim—— <— 
t 一 oo 万 及 


证 明 完毕 . ! 

方程 (7.9) 说 明了 , 如 果 我 们 能 确定 在 时 刻 t 的 平均 超额 寿命 E[Y (t)], 那么 我 
们 可 以 算得 m(b, 反之 亦 然 . 
例 7.11 考察 更 新 过 程 , 它 的 到 达 间 隔 分 布 是 两 个 指数 分 布 的 卷 积 , 即 

下 = 玖 * 态 ， 其 中 玉昌 =1 一 eati=12 

我 们 由 先 确定 E[Y(t)] 来 确定 更 新 函数 . 为 了 得 到 在 t 的 平均 超额 寿命 , 想象 每 个 更 
新 对 应 于 使 用 一 台新 的 机 器 , 并 且 假 设 每 台 机 器 有 两 个 组 件 , 开始 组 件 1 在 使 用 , 而 
它 持续 一 个 速率 为 Ju 的 指数 时 间 , 然后 使 用 组 件 2, 它 持续 一 个 速率 为 ia 的 指数 
时 间 . 当 组 件 2 失效 时 , 一 台新 的 机 器 开始 使 用 ( 即 一 个 更 新 发 生 ). 现在 考虑 过 程 
{X(t),t > 0}, 其 中 X(t) = i, 如果 组 件 i 在 时间 t 在 使 用 . 容易 看 出 {X(t),t > 0} 是 
一 个 两 状态 的 连续 时 间 的 马尔 可 夫 链 , 所 以 , 利用 例 6.11 的 结果 , 它 的 转移 概率 是 


Pi(= eite)t 4 — A 
M+ kh2 M+h2 


为 了 计算 在 用 的 机 器 在 时 刻 t 的 平均 剩余 寿命 , 我 们 取 条 件 于 在 使 用 的 是 第 一 个 组 
件 还 是 第 二 个 组 件 . 若 它 的 第 一 个 组 件 仍 在 使 用 , 则 它 的 平均 剩余 寿命 是 站 + 声 ! 
而 若 它 已 经 使 用 第 二 个 组 件 , 则 它 的 平均 剩余 寿命 是 总 因此 , 以 p(t) 记 在 时 刻 t 
在 使 用 的 机 器 用 的 是 它 的 第 一 个 组 件 的 概率 , 我 们 有 
二 1-pt) _ 1 ,p(t) 
le CC 六 志 )zg 二 


灌 
H2 Hl 

但 是 , 由 于 在 时 刻 0 第 一 台 机 器 使 用 它 的 第 一 个 组 件 , 由 此 推出 p(t) = P(t), 所 以 ， 

用 上 面 P(t) 的 表达 式 , 我 们 得 到 


1 
ElIY(tj]= 一 + @— (Kitpa)t 十 
Ya) ba 和 十 je Hi(p1 十 jz) 


(7.10) 


现在 从 方程 (7.9) 推出 0 
t 
四 (7.11) 
其 中 到 达 间 隔 时 间 的 均值 为 y, 在 这 种 情形 由 


1 
着 
上 HA pk2 Hip2 
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给 出 . 将 方程 (7.10) 以 及 上 面 的 方程 代入 方程 (7.11), 经 过 化 简 , 导出 


mt) = Et | 一 er(a+wa) 国 
和 + 和 (K+ pa) 


注 “利用 方程 (711) 中 的 关系 和 由 两 状态 的 连续 时 间 的 马尔 可 夫 链 的 结果 , 用 在 
例 7.11 中 对 于 到 达 辣 隔 分 布 
FW =pR(D)+ 0 -DRt) 和 F(t)=pR()+ 0 -DR Fa)() 
同样 的 方式 得 到 更 新 函数 ， 其 中 Fil(t) = 1 一 ent > 0,1 二 1,2. 四 
假设 更 新 过 程 的 间隔 时 间 都 取 正 整数 值 令 
jo { 1， 在 时 刻 :有 一 次 更 新 


0， 其 他 情形 
注意 , 到 时 刻 n 为 止 的 更 新 次 数 N(n) 可 表示 为 
N(n) = >» Ei 
i=1 
对 上 式 两 边 取 期 望 得 


m(n) = EIN(n)] = DP{ 在 时 刻 更 新 } 


i=1 


因此 由 基本 更 新 定理 可 得 
1P{ 在 时 刻 i 更 新 } 
[更 新 之 间 的 时 间 ] 
对 于 数列 a1,a2,…, 可 以 证 明 


Di 


n 


lim。 an 一 QG 之 ,im = 一季 
于 是 , 如 果 limn-,woP {在 时 刻 n 更 新 } 存在 , 那么 极限 必定 是 
例 7.12 令 Xi(i > 1) 是 独立 同 分 布 的 随机 变量 , 并 令 


n 
S50=0, Sn=D ,Xi n>0 
i=1 


1 
了 [更 新 之 问 的 时 间 ] 


1 
过 程 {Sm,n > 0} 称 为 随机 徘徊 过 程 . 假设 ELIXi < 0. 由 强大 数 定律 可 得 
ii 
dm 
但 是 如 果 3 收敛 到 一 个 负数 , 那么 Su 必定 趋向 于 -oo 令 a 是 初次 运动 后 随机 


徘徊 恒 为 负 的 概率 , 即 
a=P{Sn <0,n>1} 
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为 了 确定 a, 定义 一 个 计数 过 程 : 如 果 Sn < min(0, 51,…, Sn-1) 就 说 在 时 刻 n 有 
一 个 事件 发 生 . 即 每 次 事件 发 生 , 随机 徘徊 过 程 就 降 到 一 个 新 的 低 点 . 于 是 , 如 果 在 
时 刻 n 有 一 个 事件 发 生 , 若 

Knt+1 > 0, Xnt1+ Xnt2 0, ,Xntlt+ 二 ntk-1 0, Xntl++ Xntk <0 


则 下 一 个 事件 在 个 时 间 单位 后 发 生 . 因为 Xi(i > 1) 是 独立 同 分 布 的 , 所 以 上 面 
的 事件 与 X1,…, Xn 的 值 独 立 , 其 发 生 的 概率 与 n 无 关 . 从 而 相继 两 个 事件 之 间 的 
时 间 是 独立 同 分 布 的 , 这 就 表明 计数 过 程 是 一 个 更 新 过 程 . 于 是 
P{ 在 时 刻 n 更 新 } = P{S。 < 0, 5, < S1,Sn < 5S2,.…, Sn < Sn-_1} 
二 有 0 
Xas 十 … 十 Xn<0…,Xn<0} 
因为 Xn, Xn-1……Xi 与 X1,X2,… ,Xn 有 相同 的 联合 分 布 , 所 以 如 果 把 Xi 换 成 
Xn, 把 X2 换 成 Xn-1, 把 Xs 换 成 Xn-2, 依次 类 推 , 则 上 面 的 概率 取 值 不 变 , 从 而 ， 
P{ 在 时 刻 n 更 新 } = P{Xn 十 … 十 X1 < 0, Xn-1 十 … 
十 XI < 0,Xn -2 十 … 十 XI <0 ,XI<0} 
=P{Sn <0,Sn_1<0,Sn-2 <0,.….,S1 <0} 
于 是 ， 
,Jim_P{ 在 时 刻 n 更新} =P{Sn < 0,n>1}=a 
但 是 , 由 基本 更 新 定理 知 , 这 表明 


和 
“了 


其 中 了 是 更 新 之 间 的 时 间 , 即 
T= min(n: Sn, <0) 
例如 , 在 不 带 左 跳 的 随机 徘徊 情形 (其 中 沁 社 -1 P{Xi = 让 = 1), 我 们 在 3.6.6 节 证 
明了 , 当 BE[Xi] <0 时 EIT] = -1/E[X, 即 对 于 有 负 均 值 的 不 带 左 跳 的 随机 徘徊 ， 
P{Sn < 0, 所 有 nn} = 一 ECX 

这 就 证 实 了 在 3.6.6 节 得 到 的 一 个 结果 . 

一 个 重要 的 极限 定理 是 更 新 过 程 的 中 心 极限 定理 . 它 投 述 为 , 对 于 大 的 t, Nb 
近似 于 均值 为 t/h 和 方差 为 to?/ps 的 正 态 分 布 , 其 中 1 和 o? 分 别 是 到 达 间 隔 分 布 


的 均值 和 方差 . 即 我 们 有 下 述 定理 , 这 里 并 不 给 出 证 明 . 
定理 7.3 (更 新 过 程 的 中 心 极限 定理 ) 


NO LF 
i { Vto? /ps < 村)- 去 | 人 
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此 外 因为 由 更 新 过 程 的 中 心 极限 定理 能 够 预期, 可 以 证 明 ext 由】 收敛 到 
3. 即 可 以 证 明 


Eld 


lim 
例 7.13 两 台 机 器 持续 地 处 理 无 穷 个 零 活 . 在 机 器 1 上 处 理 一 个 零 活 的 时 间 是 参 
数 为 n =4 和 入 = 2 的 伽 马 随机 变 基 , 而 在 机 器 2 上 处 理 一 个 零 活 的 时 间 在 0 和 4 
之 间 均 匀 地 分 布 . 求 到 时 刻 t= 100 为 止 , 两 个 机 器 一 起 至 少 可 以 处 理 90 个 零 活 的 
概率 的 近似 值 . 
解 ” 如 果 我 们 以 Ni(t) 记 到 时 刻 t 为 止 机 器 i 可 以 处 理 的 零 活 个 数 , 那么 {Ni(t),t > 
0} 与 {NN2(t),t > 0} 是 独立 的 更 新 过 程 . 第 一 个 更 新 过 程 的 到 达 间 隔 分 布 是 参数 为 
有 =4 和 入 = 2 的 伽 马 随机 变 基 , 故而 有 均值 2 和 方差 1. 相应 地 , 第 二 个 更 新 过 程 
的 到 达 间 隔 在 0 和 4 之 间 均 匀 分 布 , 故而 有 均值 2 和 方差 16/12. 

所 以 , Ni(100) 近似 地 是 均值 为 50 和 方差 为 100/8 的 正 态 随机 变 荆 , 而 Nz(100) 
近似 地 是 均值 为 50 和 方差 为 100/6 的 正 态 随 机 变 基 . 因此 ，Ni(100) + Nz(100) 近 
似 地 是 均值 为 100 和 方差 为 175/6 的 正 态 随机 变 基 , 于 是 以 更 记 标准 正 态 分 布 函 
数 , 我 们 有 


I =02/p8 (7.12) 


Pp{N(100) + Na(100) > 89.5} = ? {0 N2(100) — 100 ~、 89.5— 中 } 


Vi > Vi 


10.5 


1—® 0 
V175/6 175/6 


) 之 和 (1.944) 0.9741 。 国 
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大 基 的 概率 模型 是 下 述 模型 的 特殊 情形 . 考虑 到 达 间 隔 时 间 X。(n > 1) 的 更 
新 过 程 {N(t),t > 0}, 并 且 假 设 每 次 更 新 发 生 时 我 们 接受 一 个 报酬 . 以 Rn 记 在 第 
nn 次 更 新 时 得 到 的 报酬 . 假定 Ra(n > 1) 独立 同 分 布 , 然而 , 我 们 允许 Rn 可 以 依赖 
于 (而 通常 是 依赖 于 ) 第 n 个 更 新 区 间 的 长 度 Xa. 如 果 我 们 令 


N(t) 
R(t) = DRn 
n=1 
那么 R(t) 表示 到 时 刻 t 为 止 赚 到 的 全 部 报酬 . 令 
E[ 司 =E[Rn]， 了 [X] =E[Xn] 
命题 7.3 ”如 果 ER < co 且 EIX] < co, 那么 
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(a) 以 概率 为 1， lim, 2 = 请 
(b) lim, Eo a 萌 


证 明 我们 只 给 出 (a) 的 证 明 . 为 了 证 明 它 , 写 出 


中 -2 


由 强大 数 定律 , 我 们 得 到 


2 
N(t) 


一 E[RJ， 当 tt 一品 时 
而 由 命题 7.1 


于 是 得 到 结果 . m 
注 (i) 如 果 每 发 生 一 次 更 新 , 就 说 完成 一 个 铂 环 , 那么 命题 7.3 说 明 单位 时 间 的 长 
程 平均 报酬 , 等 于 在 一 个 循环 中 赚 到 的 期 望 报酬 除 以 一 个 循环 的 期 望 长 度 . 
在 例 7.6 中 , 如 果 我 们 假设 相继 的 顾客 在 银行 的 存款 数 是 独立 的 随机 变量 ， 
具有 相同 的 分 布 甩 ; 那么 累计 存款 率 limt-e(t 之 前 的 总 存款 )/t 由 
E[ 一 个 循环 中 的 存款 数 ] _ jn 
El[ 一 个 循环 的 时 间 ] jo + 


给 出 , 其 中 jiG 十 于 是 循环 时 间 的 均值 , 而 jo 是 分 布 末 的 均值 


(ii) 虽然 我 们 假设 了 报酬 是 在 更 新 的 时 间 赚 到 的 , 当 报酬 是 在 整个 循环 逐步 赚 
到 时 , 结果 仍然 成 立 . 

例 7.14( 汽 车 购买 模型 ) 汽车 的 寿命 是 一 个 具有 分 布 有 和 概率 密度 h 的 连续 的 随 
机 变量 . 布朗 先生 使 用 一 个 策略 是 , 一 旦 他 的 车 坏 了 或 者 用 了 7 年 , 他 就 购买 一 辆 
新 车 . 假设 一 辆 新 车 的 价格 为 C1 美元 , 而 且 只 要 布朗 先生 的 车 坏 了 就 招致 一 个 附 
加 花费 C2 美元 . 在 用 过 的 车 没有 再 卖 的 价值 的 假定 下 , 布朗 先生 的 长 程 平均 费用 
是 多 少 ? 

如 果 每 次 布朗 先生 买 一 辆 新 车 , 我 们 就 说 完成 了 一 个 循环 , 那么 从 命题 7.3 推 
出 (用 价格 替代 报酬 ) 他 的 长 程 平均 花费 等 于 

了 -个 循环 中 引起 的 费用 ] 
卫 | 一 个 循环 的 长 度 ] 

现在 令 X 是 在 一 个 任意 的 循环 中 布朗 先生 的 车 的 寿命 , 那么 在 这 个 循环 中 招致 的 
费用 将 由 
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GG， 车 X55T 
Ci+C， 若 X<T 
表示 . 所 以 , 在 一 个 循环 上 招致 的 期 望 费 用 是 
CiP{X >T}+(C1+C2)P{X < T}= C01+C2H(T) 
同样 , 循环 的 长 度 是 
X, 车 XX<T 
TT 著 尖 >T 
所 以 一 个 循环 的 期 望 长 度 是 


T oo T 
| Zh(z)dz +| Th(z)dz = | zh(z)dr + T[1 — H(T)] 
o T o 


于 是 , 布朗 先生 的 长 程 平均 费用 是 


G1 + C2H(T) (19) 


人 zh(z)dz + T[1 — H(T)] 
0 


现在 假设 一 辆 车 的 寿命 (以 年 计 ) 在 (0, 10) 上 均匀 地 分 布 , 而 假设 C1 是 3 千 美 
元 以 及 C2 是 1/2 千 美元 . 问 了 是 什么 值 使 布朗 先生 的 长 程 平均 花费 最 小 ? 
若 布朗 先生 使 用 值 T(T < 10), 则 由 方程 (7.13), 他 的 长 程 平均 费用 等 于 


1 
3+3(7/10) 3+T/20 _ 60+ 了 
~ T2/20+(10T—72)/10 207— 72 


| noar +T(1—7/10) 
0 


现在 我 们 用 微 积分 使 它 达到 最 小 . 令 


I- 王 

和 WT) = (207 一 T2) — (60+7)(20— 27) 

g(T)= rT 
令 它 等 于 0, 得 到 

207 —T?= (60+T)(20 一 27) 
或 者 , 等 价 地 
T?+1207T—1200=0 

它 导出 解 


Ts9.25 和 T% 一 129.25 
由 于 了 < 10, 由 此 推出 布朗 先生 的 最 佳 策略 是 , 一 旦 他 的 旧 车 用 了 9.25 年 就 购买 新 
车 . 国 
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例 7.15( 火 车 发 车 ) 假设 旅客 按 到 达 间隔 时 间 的 均值 为 4 的 一 个 更 新 过 程 到 达 某 
火车 站 . 一 旦 有 N 个 乘客 等 候 在 火车 站 , 就 发 出 一 辆 火车 . 如 果 火 车 站 在 有 个 乘 
客 等 待 时 会 招致 速率 为 每 个 单位 时 间 nc 美元 的 费用 , 问 火车 站 招致 的 平均 费用 是 
多 少 ? 

如 果 发 出 一 辆 火车 , 我 们 就 说 完成 了 一 个 循环 , 那么 上 面 的 是 一 个 更 新 报酬 过 
程 . 一 个 循环 的 期 望 长 度 是 需要 到 达 N 个 乘客 的 期 望 时 间 , 而 由 于 到 达 间 隔 时 间 的 


均值 为 /., 它 等 于 
E[ 一 个 循环 的 长 度 ] = 


如 果 我 们 以 Th 记 在 一 个 循环 中 第 n 个 到 达 者 与 第 n+ 1 个 到 达 者 之 间 的 时 间 , 那 
么 一 个 循环 中 的 期 望 费用 可 以 表示 为 
E[ 一 个 循环 的 费用 ] = E[cTi +2cT2 十 …+(N 一 1)cTw-i] 
由 于 E[Tn] = 它 等 于 N 
pa(N-1) 
因此 , 火车 站 招致 的 平均 费用 是 
cuN(N -1) _c(N-1) 
XN 
现在 假设 每 开 出 一 辆 火车 招致 车 站 费用 6 个 单位 . 问 当 c= 2,4= 1 时 ,入 取 
什么 值 时 车 站 的 长 程 平均 费用 最 少 ? 
在 这 种 情形 , 当 火 车 站 用 N 时 , 我 们 有 单位 时 间 的 平均 费用 是 
6+cuN(N—1)/2 6 
Nr = 
将 它 当 作 N 的 连续 函数 处 理 , 利用 微 积分 我 们 得 到 使 它 最 小 的 N 的 值 是 
N= V6~2.45 


| N 的 最 佳 整数 值 是 2 或 者 3, 它们 导出 平均 费用 的 值 都 是 4. 因此 , N = 2 上 
= 3 使 火车 站 的 平均 费用 最 少 . 
人 7.16 ”假设 顾客 按 速率 为 和 的 泊 松 过 程 到 达 一 个 单 服务 线 的 系统 . 本 
须 通 过 一 个 通 向 服务 线 的 门 . 然而 , 每 次 有 人 通过 的 随后 的 t 单位 时 间 内 门 会 锁 住 . 
看 到 门 锁 住 的 顾客 将 流失 并 由 系统 招致 一 个 费用 c. 看 到 一 个 未 锁定 的 门 的 顾客 将 
通过 服务 线 , 如 果 服 务 线 在 闲 着 , 这 个 顾客 就 接受 服务 ; 如 果 服 务 线 在 忙 , 则 顾客 不 
接受 服务 而 离开 , 并 招致 一 个 费用 K. 如 果 一 个 顾客 的 服务 时 间 是 速率 为 1 的 指数 
分 布 , 求 此 系统 招致 的 单位 时 间 的 平均 费用 . 
解 ” 可 以 考虑 上 面 为 更 新 报酬 过 程 , 每 次 一 个 到 达 的 顾客 发 现 门 未 锁 , 就 开始 一 个 
新 的 循环 . 这 是 因为 , 无 论 到 达 者 看 到 服务 线 是 否 在 闲 着 , 门 在 随后 的 t 单位 时 间 内 
都 会 锁定 , 而 服务 线 将 忙 一 个 速率 为 上 的 指数 分 布 时 间 XX( 若 服务 线 在 闲 着 , 则 XX 
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是 进入 的 顾客 的 服务 时 间 ; 若 服务 线 忙 着 , 则 X 是 在 服务 的 顾客 的 剩余 服务 时 间 ). 
由 于 下 一 个 循环 将 开始 于 时 间 t 后 首次 到 达 的 时 刻 , 由 此 推出 
[一个 循环 的 时 间 | = t+ 二 
以 Ci 记 在 一 个 循环 中 由 于 到 达 者 看 到 门 锁 着 而 招致 的 费用 . 那么 , 由 于 在 循环 中 
前 面 的 上 时 间 单 位 中 的 每 一 个 到 达 者 将 招致 一 个 费用 c, 所 以 
E[C1] = Mte 
同样 , 以 Cs 记 在 一 个 循环 中 由 于 一 个 到 达 者 看 到 门 开 着 但 是 服务 线 在 忙 而 招致 的 
费用 . 那么 , 因为 如 果 在 循环 开始 后 服务 线 还 在 忙 一 个 时 间 t 将 招致 费用 KK, 故而 在 
这 时 间 以 后 的 下 一 个 到 达 发 生 在 循环 完成 前 , 我 们 看 到 
EC = Ke A 


十 作 


从 而 
入 Ke 性 


Me 
每 单位 时 间 的 平均 费用 = 一 四 
A 

例 7.17 ”考虑 按 顺序 地 生产 产品 的 制造 过 程 , 每 个 产品 或 者 是 废品 , 或 者 是 可 接受 
的 . 下 面 的 抽样 方案 常常 用 于 检测 并 尽量 多 地 消除 废品 ， 开 始 , 每 个 产品 都 要 检查 ， 
而 且 一 直 进行 到 有 相继 的 人 个 可 接受 的 产品 为 止 . 在 这 时 100% 检查 结束 , 不 再 检 
查 所 有 产品 , 随后 的 每 个 产品 以 概率 a 独立 地 检查 . 这 种 部 分 检查 持续 到 过 到 一 个 
废品 为 止 , 这 时 100% 检查 重新 建立 , 而 过 程 重新 开始 . 如 果 每 个 产品 独立 地 以 概率 
9 为 废品 . 

(a) 被 检查 的 产品 的 比例 是 多 少 ? 

(b) 如 果 检测 到 的 废品 都 拿 走 , 留 下 的 度 品 的 比例 是 多 少 ? 
注 “在 开始 分 析 之 前 , 注意 上 述 抽样 方案 是 为 产生 废品 的 概率 随时 间 而 交 化 的 情 
况 设计 的 . 它 着 望 将 100% 检查 关联 于 废品 率 大 的 时 间 , 而 将 废品 率 小 的 时 间 关联 
于 部 分 检查 .然而 , 在 废品 率 始终 保持 为 常数 的 极端 情形 , 弄 明白 这 个 方案 的 原理 
是 很 重要 的 . 
解 ” 首 先 注意 到 可 以 将 上 述 作为 一 个 更 新 报酬 过 程 , 一 个 新 的 循环 开始 于 每 次 运 


行 100% 检查 之 时 . 于 是 我 们 有 
的 比例 _ 了 [ 在 一 个 循环 中 被 检查 的 个 数 ] 
窟 和 丰 的 晤 的 几 们 [在 二 个 储 环 中 生产 的 个 到 | 
以 Nis 记 直到 有 相继 的 上 个 可 接受 的 产品 时 被 检查 的 产品 个 数 . 一 旦 部 分 检查 开始 
( 即 在 Ns 个 产品 已 经 生产 后 ), 由 于 每 个 被 检查 的 产品 以 概率 9 是 废品 , 由 此 推出 找 
到 一 个 废品 所 必须 检查 的 期 望 产品 数 是 1/4. 因此 
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[在 一 个 特 环 中 被 检查 的 个 数 | = BIN] + 


此 外 , 由 于 在 部 分 检查 时 每 个 产品 独立 地 被 检查 , 而 以 概率 ad 发 现 是 废品 , 由 此 推 
出 直至 一 个 产品 被 查 出 是 废品 的 期 望 产品 数 是 1/aq, 所 以 


B[ 在 一 个 循环 中 产品 的 个 = ELN+ 过 ， 


同样 , 由 于 EINk] 是 当 每 个 产品 以 概率 p = 1 一 4 是 可 接受 时 需要 得 到 一 列 上 个 可 
接受 产品 的 期 望 试验 ( 即 检查 ) 次 数 , 由 此 从 例 3.15 推出 
二 
BIN st FR 


因此 , 我 们 得 到 


n= 被 检查 产品 的 比例 = 一 和 2 全 一 

-i 

了 a 
为 了 回答 (b), 首先 注意 由 每 个 产品 以 概率 4 是 废品 推出 , 既 被 检查 又 被 发 现 是 刻 
品 的 产品 比例 是 9R. 因此 , 对 于 很 大 的 N, 在 前 N 个 生产 的 产品 中 , 有 (近似 地 ) 
NgR 个 被 发 现 是 废品 而 被 拿 走 、 因 为 在 前 N 个 产品 中 包含 (近似 地 ) Na 个 废品 ， 
由 此 推出 有 Ng -~ NgPi 个 废品 没有 发 现 , 因此 ， 
没有 拿 走 的 废品 的 比例 ~ 


当 N 一 sc 时, 近似 变 成 精确 , 我 们 有 
没有 拿 走 的 废品 的 比例 代 一 记 ]， 
例 7.18( 更 新 过 程 的 平均 年 龄 ) 考虑 一 个 具有 到 达 间 隔 分 布 忆 的 更 新 过 程 , 而 且 
定义 4(t) 为 最 后 一 次 更 新 到 的 时 间 . 若 更 新 表示 旧 的 零件 失效 而 将 换 上 一 个 新 
的 , 则 A(t) 表示 在 使 用 中 的 零件 在 时 刻 上 的 年 龄 . 由 于 Swto 表示 早 于 时 刻 + 或 在 
时 刻 的 最 后 一 次 事件 的 时 间 , 所 以 有 
Alt) =t— Svd) 


Nal1l — Pi) 
N(1— qaR) 


我 们 想 求 年 龄 的 平均 值 , 即 , 
| 4(t)dt 
了 
为 了 确定 这 个 基 , 我 们 以 如 下 的 方式 运用 更 新 报酬 理论 : 假定 在 任意 时 间 以 大 小 
等 于 此 时 更 新 过 程 的 年 龄 的 速率 接受 钱 . 即 在 时 刻 t 以 速率 A(t) 接受 钱 ,所 以 
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上 4(tb)dt 表示 我 们 在 时 间 s 的 全 部 所 赚 . 因为 在 更 新 发 生 时 一 切 都 从 头 开始 , 由 此 
推出 


4(0ar 一 下 -人 要 新 全 中 的 加 是 
sh 一 个 更 新 竺 环 的 时 间 |] 
现在 , 由 于 更 新 过 程 在 更 新 循环 起 算 的 时 刻 + 的 年 队 正 是 4， 所 以 有 
x 
在 一 个 更 新 循环 中 的 报酬 二 tdt = 苇 


其 中 和 是 更 新 循环 的 时 间 . 因此 , 我 们 有 


“Alat 


| _ EIX?] 
年 龄 的 平均 值 = lim 下 一 = EIX] 


(7.14) 


其 中 X 是 具有 分 布 函数 F 的 到 达 间 隔 时 间 . 
例 7.19( 更 新 过 程 的 平均 超额 寿命 ) 与 更 新 过 程 相关 的 另 一 个 基 是 在 时 刻 t 的 超 
额 寿命 Y(t). Y(t) 定义 为 等 于 从 上 直到 下 一 个 更 新 的 时 间 , 而 这 表示 在 时 刻 上 使 用 
的 产品 的 剩余 (或 残留 ) 寿命 . 超额 寿命 的 平均 值 , 即 


dt 
也 可 以 容易 地 由 更 新 报酬 理论 得 到 . 为 此 假设 在 任意 时 刻 t 以 速率 Y(t) 获取 报酬 ， 
由 更 新 报酬 理论 每 单位 时 间 我 们 的 平均 报酬 由 


各 机 的 和 人 = in 上 Ye -个 更 下 的 


小 E[ 一 个 更 新 循环 的 时 间 ] 
给 出 . 现在 , 以 X 记 一 个 更 新 循环 的 长 度 , 我 们 有 
X 


xX 2 
在 一 个 循环 中 的 报酬 = | (X -0dt= 和 
于 是 超额 寿命 的 平均 值 是 
ELX3] 
超 招考 命 的 平均 值 = 号 


它 与 更 新 过 程 的 年 龄 的 平均 值 是 一 样 的 . 国 
例 7.20 ”假设 乘客 按 速率 为 和 的 泊 松 过 程 到 达 一 个 公交 车 站 . 再 设 公交 车 按 分 布 
函数 为 下 的 到 达 间 隔 时 间 的 更 新 过 程 到 达 , 且 带 走 所 有 等 车 的 乘客 . 假定 乘客 到 达 
的 泊 松 过 程 和 公交 车 到 达 的 更 新 过 程 是 独立 的 . 求 

(a) 等 车 的 平均 乘客 数 对 所 有 时 间 的 平均 数 . 
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(b) 一 个 乘客 等 待 的 平均 时 间 (对 所 有 乘客 的 平均 ). 
解 ”我 们 利用 更 新 报酬 过 程 来 求解 . 每 次 一 辆 公交 车 到 达 开始 一 个 新 的 循环 . 令 全 
为 一 个 循环 的 时 间 , 注意 T 的 分 布 函 数 是 下. 若 我 们 假设 每 个 乘客 单位 时 间 付 1 元 
的 报酬, 而 任意 时 刻 的 报酬 率 就 是 那 时 的 等 待人 数 , 故而 单位 时 间 的 平均 报酬 是 等 
待 公交 车 的 平均 人 数 . 将 在 一 个 循环 中 获得 的 报酬 记 为 R, 更 新 报酬 定理 给 出 了 
EI[R] 


平均 等 待人 数 = EIT] 


将 在 一 个 循环 中 到 达 的 人 数 记 为 N. 为 了 确定 了 [可 , 我 们 取 条 件 于 了 和 N. 现在 有 
EIRIT =t,N =n] =nt/2 


它 来 自 , 因为 在 给 定 直至 时 刻 上 有 n 人 到 达 时 , 他 们 到 达 的 时 间 集 合 和 n 个 独立 的 
(0,t) 均匀 随机 变 基 有 相同 的 分 布 , 所 以 从 每 个 顾客 平均 收取 t/2. 因此 


E[RIT, N] = NT/2 


取 期 望 得 出 i 
EIR] = 3EINT) 


为 了 确定 EINT], 取 条 件 于 T, 就 得 到 
E[INTIT] = TELNIT] = MT? 


前 式 来 自 , 因为 给 定 7 直至 公交 车 到 来 , 等 待 的 人 数 是 以 均值 MT 泊 松 分 布 的 . 因 
此 , 对 上 式 取 期 望 , 我 们 得 到 


EIR] = 3EINT] = AEIra/2 


由 它 推出 Etral 
平均 等 待人 数 = 58 
此 处 T 具 有 到 达 间 隔 分 布 F. 
为 了 确定 乘客 等 待 的 平均 时 间 , 注意 到 因为 在 等 待 公交 车 时 每 个 乘客 每 单位 时 
间 要 付 1 元 , 一 个 乘客 所 付 的 总 额 是 该 乘客 的 等 待 时 间 . 因为 R 是 在 一 个 循环 中 的 
总 额 , 于 是 推出 
R=Wi+:…+WyN 


这 里 Wi 是 第 i 个 乘客 的 等 待 时 间 . 现在 如 果 我 们 考虑 从 依次 的 乘客 所 赚 得 的 报酬， 
即 Wi, Wz,…, 并 设想 报酬 是 在 时 刻 i 赚 得 的 , 那么 这 些 报酬 的 序列 构成 一 个 离散 
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时 间 的 更 新 报酬 过 程 , 其 中 一 个 新 的 循环 在 时 刻 N + 1 开始 . 因此 , 由 更 新 报酬 过 
程 理论 以 及 上 述 恒等式 , 我 们 可 知 


Wit++Wn ET 十 …+WN] _ E[R] 
n EIN] 一 BIN 


如 
利用 
E[N] = EIEINIT] = ET] = AE[T] 
结合 上 面 推导 的 E[R] = AE[T?]/2, 我 们 得 到 结果 


lm + Wn EIT 
no n 于 加 | 


但 是 器 条 是 到 达 公交 车 这 个 更 新 过 程 的 超 关 寿命 的 平均 , 上面 的 方程 导 到 一 个 
有 趣 的 结果 ， 一 个 乘客 的 平均 等 待 时 间 等 于 当 我 们 对 一 切 时 间 平 均 时 直至 下 一 辆 
公交 车 到 达 的 平均 时 间 . 因为 乘客 接 泊 松 过 程 到 达 , 此 结果 是 一 般 结果 的 特殊 情形 
这 里 所 说 的 一 般 结果 是 PASTA 原则 , 将 在 第 8 章 中 加 以 介绍 .PASTA 原则 是 说 
汉 检 到 法 省 所 见 的 系统 和 对 一 切 时 闻 取 平均 的 系统 相同 (在 本 全 ,系统 反 表 到 
下 一 辆 公交 车 的 时 间 ) 


7.5 再 生 过 程 


考虑 一 个 状态 空间 为 0,1,2,… 的 随机 过 程 {X(b,t > 0}, 它 具有 如 下 的 性 质 ， 
存在 一 些 (随机 的 ) 时 间 点 使 过 程 (概率 地 ) 在 这 些 点 重新 开始 . 即 假设 以 概率 1 存 
在 一 个 时 间 ,使 这 个 过 程 的 时 间 超过 的 部 分 是 从 0 出 发 的 整个 过 程 的 概率 复 
制品 . 注意 , 这 个 性 质 表明 存在 更 多 的 时 间 T2,T3,… 与 Ti 有 同样 的 性 质 . 这 样 的 
随机 过 程 , 称 为 再 生 过 程 . 
由 上 面 推出 写字 ,…: 构成 一 个 更 新 过 程 的 到 达 时 间 , 每 当 一 个 更 新 出 现 , 我 们 
就 说 完成 了 一 个 循环 
例 (i) 一 个 更 新 过 程 是 再 生 的 , 而 五 表示 首次 更 新 的 时 间 
(ii) 一 个 常 返 的 马尔 可 夫 链 是 再 生 的 , 而 Ti 表示 首次 转移 回 初始 状态 的 时 间 
我 们 想 要 确定 一 个 再 生 过 程 处 在 状态 j 的 长 程 时 间 比 例 . 为 了 得 到 这 个 量 , 让 
我 们 想象 , 在 过 程 处 在 状态 j 时 我 们 以 每 单位 时 间 价格 为 1 的 速率 赚 取 报酬 ,而 在 
其 他 情形 价格 为 0. 即 若 I(s) 表示 在 时 间 s 赚 到 的 价格 , 那么 
1， 车 X(s)=j 
‘={ 车 X(s) #7 
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而 

+ 前嫌 到 的 总 报 可 = | 7(s)ds 
因为 上 面 显然 是 一 个 更 新 报酬 过 程 , 它 在 循环 时 间 人 重新 开始 , 从 命题 73 可 知 
单位 时 间 的 平均 报酬 = 了 ET 的 扣 本 ， 
然而 ,单位 时 间 的 平均 报 一 正好 等 于 过 程 在 状态 j 的 时 间 的 比例 . 即 我 们 有 如 下 的 
全 是 
命题 7.4 ”对 于 一 个 再 生 过 程 ， 
a 了 -个 销 环 中 在 状态 了 的 时 间 时 
程 在 状态 了 的 时 间 的 比例 一 
长 程 在 状态 j 的 时 间 的 比例 全 
注 “ 若 特 环 时 间 Ti 是 一 个 连续 的 随 宙 突 量 , 则 利用 一 个 称 为 “关键 更 新 定理 " 的 
次 识 水平 的 定理 ,可 以 证 明 上 式 也 等 二 系统 在 时 间 处 在 状态 j 的 极限 概率 , 即 如 
果 TT 是 连续 的 , 那么 


lim P{X(D = 才 = 


[一 个 循环 中 在 状态 j 的 时 间 量 ] 
E[ 王 不 循环 的 时 间 ] 

例 7.21 考虑 初始 处 在 状态 i 的 正常 返 的 连续 时 间 的 马尔 可 夫 链 由 马尔 可 夫 性 ， 
在 过 程 每 次 再 进入 状态 i 的 时 刻 , 它 重新 开始 .于 是 , 回 到 状态 i 是 一 次 更 新 , 而 且 
构成 一 个 新 的 循环 的 开始 . 由 命题 7.4 推出 

肥 补 在 燃 起 2 的 时 间 卫 出 克 = 芷 三 个 i j 的 时 间 二 | 
其 中 jis 表示 回 到 状态 i 的 平均 时 间 . 如 果 我 们 取 j 为 i, 那么 我 们 得 到 

长 程 在 状态 i 的 时 间 的 比例 = We. 

例 7.22( 按 更 新 过 程 到 达 的 一 个 排队 系统 ) 考虑 一 个 等 待 时 间 系统 , 其 中 顾客 按 任 
意 的 一 个 更 新 过 程 到 达 , 而 由 具有 一 个 任意 服务 时 间 分 布 的 单 服务 线 提供 每 次 一 个 
服务 . 车 我 们 假设 在 时 刻 0 第 一 个 顾客 恰好 到 达 , 则 {X(b),t > 0} 是 一 个 再 生 过 程 ， 
其 中 X(t) 记 系统 中 在 时 刻 上 的 顾客 数 . 这 个 过 程 在 一 个 顾客 到 达 并 且 发 现 服务 线 
在 闲 着 时 再 生 ， 上 
例 7.23 ”虽然 一 个 系统 只 需 一 台 机 器 运行, 但 是 它 有 一 台 附加 的 机 器 作为 后 备 . 在 
使 用 的 机 器 运行 一 个 具有 密度 函数 f 的 随机 时 间 以 后 失效 . 如果 一 台 机 器 失效 而 另 
一 台 在 工作 条 件 , 则 后 者 进入 使 用 , 同时 , 刚 失效 的 机 器 开始 修理 . 如 果 一 台 机 器 失 
效 而 另 一 台 正在 修理 , 那么 , 新 失效 的 机 器 等 着 直到 修理 完成 这 时 修复 的 机 器 进入 
使 用 , 同时 , 新 失效 的 机 器 的 修理 开始 . 所 有 的 修理 时 间 有 密度 9. 求 Po、Pi、 PP, 其 
中 PR 是 恰 有 i 台 机 器 在 工作 条 件 的 长 程 时 间 比例 . 
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解 ” 如 果 恰 有 i 台 机 器 在 工作 条 件 , i = 0,1, 2, 我 们 就 说 系统 处 在 状态 i. 容易 证 明 
在 每 个 进入 状态 1 的 时 间 , 系统 概率 地 重新 开始 . 即 每 当 一 台 机 器 在 使 用 , 同时 另 
一 个 开始 修理 , 系统 重新 开始 . 每 当 系 统 进入 状态 1, 就 说 一 个 循环 开始 . 如 果 我 们 
以 X 记 一 个 循环 开始 时 使 用 的 机 器 的 工作 时 间 , 而 令 RR 为 男 一 台 机 器 的 修理 时 间 ， 
那么 循环 的 长 度 T 可 以 表示 为 

T: = max(X, R) 
当 X < RR 时, 上 式 成 立 是 由 于 , 在 这 种 情形 正 使 用 的 机 器 在 另 一 台 修 复 前 失效 , 所 
以 一 个 新 的 循环 开始 于 修理 完成 时 . 类 似 地 , 当 X > RR 时 , 上 式 成 立 是 因为 修复 先 
发 生 , 所 以 一 个 新 的 循环 开始 于 使 用 的 机 器 失效 的 时 刻 . 同时 , 令 Ti(i = 0,1,2) 是 
在 一 个 循环 中 系统 处 在 状态 i 的 时 间 比 例 . 于 是 , 因为 在 一 个 循环 中 没有 机 器 在 工 
作 的 时 间 是 : 当 这 个 其 是 正 的 情形 为 R 一 XX, 或 者 在 其 他 情形 为 0, 即 我 们 有 

T=(R-X)+ 
类 似 地 , 因为 在 一 个 循环 中 单个 机 器 在 工作 的 时 间 是 min(X, R), 所 以 有 

Ti = min(X, R) 
最 后 , 因为 在 一 个 循环 中 两 台 机 器 都 在 工作 的 时 间 是 : 当 这 个 其 是 正 的 情形 为 XR， 
或 者 在 其 他 情形 为 0, 即 我 们 有 

T=(X-R)+t 
因此 , 我 们 得 到 
_ ER-XOH pp Binin(X, Mp IX- A 

Elmax(x, 局]， Elmax(X, R)]’ Elmax(X, RA)] 
而 局 + P+ P= 1 得 自 容易 验证 的 恒等式 
max(z,7) = min(z,r) 十 (z 一 r)+ 十 (rr 一 zZ)+ 


上 面 的 期 望 可 以 计算 如 下 : 


Elmax(X, R)]= 人 次 max(z,7)f (2)g(r)dzdr 


hm 


= 三 rjf(z)g(r)dzdr 十 三 zjf(z)g(r)dzdr 
1 i i 
sla- = -ater)arar 
= ec-areomatr 
0 0 


Elmin(X, R)]= 入 用 min(z,7)f(z)g(r)dzdr 


co po0 
r 
0 


= 三 「 zjf(z)g(r)dzdr 十 | [ f(z)g(r)drdr 


EX- 有 = 人 [ce-Dyelemardz 四 


交替 更 新 过 程 


再 生 过 程 的 另 一 个 例子 是 所 谓 的 交替 更 新 过 程 , 它 考虑 一 个 可 能 处 在 两 个 状态 
( 开 或 关 ) 之 一 的 系统 . 开始 它 在 开 , 而 且 在 开 保持 一 个 时 间 21; :然后 变 成 关 , 而 且 
它 在 关 保持 一 个 时 间 六 ;然后 变 成 一 段 时 间 Zo 开 ; 然后 一 段 时 间 Y2 关 ; 然后 开 ， 
如 此 等 等 . 

我 们 假设 随机 向 基 (Zn, Ya)(n > 1) 独立 同 分 布 . 即 随机 变 基 列 {Zn} 和 随机 变 
基 列 {Y%} 都 是 独立 同 分 布 的 , 但 是 我 们 允许 Zn 和 区 有 依赖 关系 . 换 句 话说 , 每 
次 过 程 开 始 处 在 开 , 一 切 都 重新 开始 , 但 是 当 它 变 成 关 时 , 我 们 允许 关 的 时 间 长 度 依 
赖 于 前 面 开 的 时 间 . 

以 E[2] = ElZn] 和 E[Y] = EDxo] 分 别 记 一 个 开 和 一 个 关 的 周期 的 平均 长 度 . 

我 们 关注 系统 处 在 开 的 长 程 时 间 比 例 Pt. 如 果 我 们 令 


Xn=Yn+2Zn, n>1 


那么 在 时 刻 Xi 过 程 重新 开始 . 即 过 程 在 一 个 包含 一 个 开 和 一 个 关 的 区 间 的 完全 的 
循环 后 重新 开始 ， 换 句 话说 , 一 个 更 新 发 生 , 只 要 完成 一 个 循环 ， 所 以 我 们 从 命题 
7.4 得 到 
p= Fz] __ EI 

开 ElY]+E[l2] EI[ 开 +E[ 闪 ] 

同样 , 如 果 我 们 以 Py 记 系统 处 在 关 的 长 程 时 间 比 例 , 那么 
= -FX 
余生 + 天 
例 7.24( 一 个 生产 过 程 ) 交替 更 新 过 程 的 一 个 例子 是 一 个 生产 过 程 (或 机 器 ), 它 工 
作 一 段 时 间 1, 然后 停止 并 且 必须 修理 (需要 时 间 六 ), 然后 工作 一 段 时 间 22, 然后 
停止 一 段 时 间 %, 如 此 等 等 . 如 果 我 们 假设 机 器 在 修复 后 与 新 的 一 样 好 , 那么 这 构 
成 一 个 交替 更 新 过 程 . 值得 注意 的 是 假设 修理 时 间 依赖 于 在 失效 前 过 程 工作 的 时 间 
数量 是 有 意义 的 . 国 
例 7.25 。 某 个 保险 公司 对 参 保 人 的 收费 率 交替 在 rl 和 ro 之 间 . 一 个 新 的 参 保 人 
开始 在 每 单位 时 间 的 收费 率 为 ri. 当 一 个 收费 率 为 ri 的 参 保 人 在 最 近 的 s 个 单位 
时 间 没有 理赔 , 那么 他 的 收费 率 变 成 单位 时 间 ro. 收费 率 保持 在 ro 直到 作 了 一 次 
理赔 , 这 时 收费 率 回转 到 ri. 假设 给 定 一 个 参 保 人 永远 活着 , 而 且 按 速率 为 ^ 的 泊 
松 过 程 要 求 理赔 , 求 
(a) 参 保 人 以 收费 率 ri 付费 的 时 间 的 比例 Pi,i = 1,2. 
(b) 单位 时 间 所 付 的 长 程 平均 金额 . 


(7.15) 


(7.16) 
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解 ”如果 当 参 保 人 按 收费 率 mi 付费 时 , 我 们 说 系统 处 在 “ 开 ”, 而 当 参 保 人 按 收 费 
率 ro 付费 时 , 说 系统 处 在 “ 关 ”, 那么 这 个 开 - 关系 统 是 一 个 交 蔡 更 新 过 程 , 以 每 作 
一 次 理赔 开始 一 个 新 的 循环 . 如 果 X 是 相继 的 理赔 之 间 的 时 间 , 那么 在 这 个 循环 中 
处 于 开 的 时 间 是 s 和 X 中 小 的 一 个 (注意 若 X < s, 则 关 的 时 间 是 0). 由 于 XX 是 
速率 为 和 的 指数 随机 变量 , 由 上 面 可 得 


[循环 中 开 的 时 间 ] = Elmin(X,s)] = [ zhe dz + se-h = 0 一 er 
0 


因为 BIX] = 1/X, 我 们 有 
_ EL- 个 循环 中 开 的 时 间 _ 。x 


Ph BX oe MW=1-B=0” 
单位 时 间 所 付 的 长 程 平均 金额 是 
roPy +rnP =r1— (ri —ro)e” 图 


例 7.26( 更 新 过 程 的 年 龄 ) 假设 我 们 想 要 确定 更 新 过 程 的 年 龄 小 于 某 个 常数 c 的 
时 间 的 比例 . 为 此 , 令 一 个 循环 对 应 于 一 个 更 新 , 并 且 如 果 在 t 的 年 龄 小 于 或 等 于 c， 
说 系统 在 时 刻 t 处 在 开 , 而 如 果 在 t 的 年 龄 大 于 c, 说 系统 在 时 刻 t 处 在 关 , 换 句 话 
说 , 更 新 区 间 的 前 c 个 时 间 单 位 系统 处 在 “ 开 ”, 而 在 其 余 的 时 间 处 在 “ 关 ”. 因此 , 以 
X 记 一 个 更 新 区 间 , 从 方程 (7.15) 我 们 得 到 


年 龄 小 于 < 的 时 间 的 比例 = BEminCxoj 


E[X] 
i P{min(X,c) > zjdz 
EI[X] 
ee Sj 
EI[X] 
Ga — F(z))dzr 
1 ee EX 
其 中 所 是 的 分 布 函 数 , 而 我 们 用 了 对 于 非 负 随机 变量 Y 的 恒等式 


E[Y] = 人 P{Y > zjdz 图 


(7.17) 


例 7.27( 更 新 过 程 的 超额 时 间 ) 我们 考虑 确定 更 新 过 程 的 超额 时 间 小 于 c 的 长 程 
时 间 的 比例 . 为 了 确定 这 个 量 , 让 一 个 循环 对 应 于 一 个 更 新 区 间 , 并 且 只 要 更 新 过 
程 的 超额 时 间 大 于 或 等 于 c, 就 说 系统 处 在 开 , 否则 就 是 关 . 换 句 话说 , 只 要 更 新 发 
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生 过 程 就 进入 开 , 并 且 停 留 在 “ 开 ”, 直到 更 新 区 间 的 最 后 c 个 时 间 单位 它 进 入 “ 关 ?” 
为 止 . 显然 这 是 一 个 交替 更 新 过 程 , 所 以 我 们 从 方程 (7.16) 得 到 
对 间 小 = 了 [一 个 循环 中 关 的 时 间 ] 
超额 时 间 小 于 c 的 时 间 的 长 程 比例 二- 个 循 天 时 间 
如 果 X 是 更 新 区 间 的 长 度 , 那么 由 于 系统 在 最 后 的 c 时 间 单 位 处 在 “ 关 ", 由 此 推出 
在 这 个 循环 中 “ 关 ” 的 时 间 等 于 min(X,c). 于 是 
Ga 一 Flz))dz 
_ Elmin(X,c)] _ 
超额 时 间 小 于 c 的 时 间 的 长 程 比例 = EE = ET 
其 中 最 后 的 等 式 得 自 方程 (7.17). 于 是 , 从 例 7.26 的 结果 我 们 看 到 , 超额 时 间 小 于 c 
的 时 间 的 长 程 比例 与 年 龄 小 于 e 的 时 间 的 长 程 比例 是 相等 的 . 理解 这 个 等 价 性 的 一 
个 途经 是 , 考虑 一 个 已 经 运行 了 很 长 时 间 的 更 新 过 程 , 然后 从 逆向 进行 观察 . 在 这 
样 做 时 , 我 们 看 到 了 一 个 计数 过 程 , 其 相继 的 事件 间 的 时 间 是 具有 分 布 的 独立 随 
机 变 基 . 即 当 我 们 从 逆向 进行 观察 一 个 更 新 过 程 时 , 我 们 也 看 到 一 个 与 原来 的 过 程 
有 同样 概率 结构 的 更 新 过 程 . 由 于 逆向 过 程 在 任意 时 间 的 超额 时 间 (年 龄 ) 对 应 于 
原来 的 更 新 过 程 的 年 龄 (超额 时 间 )( 见 图 7.3), 由 此 推出 年 龄 和 超额 时 间 的 所 有 长 
程 性 质 必 须 相 等 . 国 
-HO)- 
所 ,后 首次 更 新 
-A()- 
忆 ,前 最 后 的 更 新 
图 7.3 箭头 指示 时 间 的 方向 
例 7.28(M/G/oo 排队 系统 的 忙 期 ) 在 5.3 节 中 , 分 析 了 顾客 按 速率 为 和 的 泊 松 
过 程 到 达 的 , 而 且 有 一 个 共同 的 服务 分 布 G 的 无 穷 条 服务 线 的 排队 系统 , 证 明了 系 
统 中 在 时 刻 上 的 顾客 数 具 有 均值 为 让 G(t)dt 的 泊 松 分 布 . 如 果 在 系统 中 至 少 有 一 
个 顾客 时 我 们 说 系统 处 于 忙 , 而 在 系统 空 时 我 们 说 系统 处 于 闲 , 求 忙 期 的 期 望 长 度 
E[B]. 
解 ” 如 果 在 系统 中 至 少 有 一 个 顾客 时 我 们 说 系统 处 于 “ 开 ”, 而 在 系统 空 时 我 们 说 
系统 处 于 “ 关 ”, 那么 我 们 有 一 个 交替 更 新 过 程 . 因为 | G(t)dt = E[S], 其 中 E[S] 
是 服务 分 布 G 的 均值 , 由 此 从 5.3 节 的 结果 推出 
Jim,P{ 系 统 在 t 处 于 “ 关 "} = exeIsl 
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随 之 , 由 交替 更 新 过 程 理论 , 我 们 得 到 
er-xEIs] = E[ 在 循环 中 “ 关 ” 的 时 间 ] 
耳环 时 间 | 
但 是 当 系统 变 成 “ 关 ", 它 总 保持 在 “ 尖 " 直到 下 一 个 到 达 , 这 给 出 
[在 循环 中 “ 关 " 的 时 间 = 大 


因为 
E[ 在 循环 中 “ 开 ” 的 时 间 ] = E[B] 
我 们 得 到 
e-XEIS] = 1/X 
17X+ Ea] 
ELB] = Kes — 1) 四 


如 果 刀 是 平均 到 达 间隔 时 间 , 则 由 
ro =| ay 


所 定义 的 分 布 函数 Fe 称 为 F 的 平衡 分 布 ， 从 上 面 推出 , Fe 表示 更 新 过 程 的 年 龄 
(或 超额 时 间 ) 小 于 或 等 于 z 的 时 间 的 长 程 比例 . 
例 7.29( 存 货 的 一 个 例子 ) 假设 顾客 按 一 个 具有 到 达 间 隔 分 布 为 F 的 更 新 过 程 来 
到 一 个 指定 的 商店 . 假设 这 个 店 存 有 一 种 单一 的 商品 , 而 每 个 到 达 的 顾客 需要 随机 
数量 的 这 种 商品 , 不 同 的 顾客 的 需求 量 是 具有 相同 分 布 G 的 独立 随机 变量 , 商店 使 
用 以 下 的 (s, 5) 订购 策略 : 如 果 存 货 量 减少 到 低 于 s, 那么 订购 足够 的 商品 使 存货 
增加 到 5. 即 如 果 在 服务 了 某 一 个 顾客 后 的 存货 是 z, 那么 订购 的 数量 是 
5-z， 若 z<s 
{ 0， 若 z>s 
假定 订购 是 立刻 供应 的 . 
对 于 一 个 固定 的 值 y,s < y < 5, 假设 我 们 想 要 确定 在 手 的 存货 至 少 与 ! 一 样 
多 的 时 间 的 长 程 比例 . 为 了 确定 这 个 量 , 我 们 说 这 个 系统 处 在 “ 开 ”, 只 要 存货 水 平 
至 少 是 y, 而 在 其 他 情形 处 在 “ 尖 ”. 用 这 些 定义 , 每 次 当 一 个 顾客 的 需求 使 商店 开始 
订购 并 最 终 导致 存货 水 平 回 到 5 时 , 系统 变 为 开 . 由 于 只 要 发 生 这 样 的 情形 , 一 个 
顾客 必须 刚 到 达 过 , 由 此 推出 , 直至 随后 的 顾客 到 达 的 时 间 构 成 具有 到 达 间 隔 分 布 
为 下 的 一 个 更 新 过 程 . 就 是 说 , 每 次 系统 变 回 到 开 , 过 程 将 重新 开始 . 于 是 , 这 样 定 
义 的 开 和 关 的 周期 构成 一 个 交替 更 新 过 程 , 而 从 方程 (7.15) 我 们 有 


一 个 循环 中 开 的 时 间 ] 


1 = 型 
存货 量 > y 的 时 间 的 长 程 比例 = 主人 环 时 间 | (7.18) 
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现在 如 果 我 们 以 D1, D2,… 记 相 继 顾客 的 需求 量 , 而 令 
Nz =min(n:Di+:…+Dn >5—7) (7.19) 


那么 在 循环 中 的 第 Ns 个 顾客 引起 存货 水 平 下 降 到 低 于 y, 而 在 循环 中 的 第 N。 个 
顾客 结束 这 个 循环 . 结果 是 , 若 我 们 以 Xi(i > 1) 记 顾客 的 到 达 间隔 时 间 ， 则 


Ny 
一 个 循环 中 开 的 时 间 = 》 ”Xi (7.20) 


i=1 
No 
循环 时 间 = 》” Xi (7.21) 

i=1 

假定 到 达 间 隔 时 间 独 立 于 相继 的 需求 , 我 们 有 

N Ni 
E 放 zx =E Ee 放 xm = E[N,E[X]] = E[X]E[N,] 
i=1 


i=1 


类 似 地 s 
E 六 xj = E[X]E[Nj] 
i=] 
所 以 , 由 方程 (7.18)、(7.20) 和 (7.21), 我 们 有 


存货 量 > y 的 时 间 的 长 程 比例 = In 


E[N,] 


然而 , 因为 D;(i > 1) 都 是 具有 分 布 G 的 非 负 的 独立 同 分 布 随机 变 基 , 由 方程 (7.19) 
推出 , Nz 与 具有 到 达 间 隔 分 布 G 的 更 新 过 程 在 时 间 S 一 z 后 首次 发 生 的 事件 的 指 
标 有 相同 的 分 布 . 即 Nz 一 1 将 是 这 个 过 程 在 时 间 S - z 之 前 的 更 新 次 数 . 因此 , 我 
们 看 到 


(7.22) 


EINy]=m(S$—y)+1, EIN:]=m(S$—s)+1 
其 中 oo 
mlt) = DGn(t) 


n=1 


从 方程 (7.22) 我 们 得 到 
_m(S—y)+1 
存货 基 > y 的 时 间 的 长 程 比例 = GT 
例如 , 如 果 顾 客 的 需求 量 是 以 均值 为 1/1 指数 地 分 布 , 那么 


_ MS—W+1 
存货 基 > y 的 时 间 的 长 程 比例 = 3 一，s<y<3 四 


s< ay 和 3 
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7.6 ” 半 马 尔 可 夫 过 程 


考虑 一 个 可 处 在 状态 1、2、3 的 过 程 . 开始 过 程 在 状态 1, 在 那里 保持 一 个 具有 
均值 yi 的 随机 时 间 , 然后 它 进入 状态 2, 在 那里 保持 一 个 具有 均值 yo 的 随机 时 间 ， 
然后 它 进入 状态 3, 在 那里 保持 一 个 具有 均值 /vs 的 随机 时 间 , 然后 它 回 到 状态 1, 如 
此 等 等 . 这 个 过 程 在 状态 i (i = 1,2,3) 的 时 间 的 比例 是 多 少 ? 

如 果 过 程 每 次 回 到 状态 1, 我 们 就 说 完成 了 一 个 循环 , 而 如 果 我 们 令 在 这 个 循 
环 中 停留 在 状态 i 的 时 间 数 基 作 为 报酬 , 那么 上 面 的 是 一 个 更 新 报酬 过 程 . 因此 从 
命题 7.3 得 到 过 程 在 状态 i 的 时 间 的 比例 已 为 

Ki 
向 十 ja 十 ja” 
类 似 地 , 如 果 我 们 有 可 以 处 在 N 个 状态 1,2,…,N 中 的 任意 一 个 的 过 程 , 它 从 状态 
1 一 2 一 3 一 … 一 入 一 1 一 入 一 1 移动 ,那么 过 程 处 在 状态 i 的 长 程 时 间 比 例 是 
下 = 一 一生 一， 2…N 
向 十 ja 十 … 十 AN 

其 中 必 是 过 程 在 每 次 访问 中 停留 在 状态 i 的 时 间 的 期 望 , 

现在 我 们 将 上 述 结果 推广 到 以 下 的 情况 ， 假 设 一 个 过 程 可 以 处 在 N 个 状态 
1,2,…, NN 中 的 任意 一 个 , 而 且 在 每 一 个 状态 i 保持 一 个 具有 均值 j; 的 随机 时 间 ， 
然后 以 概率 书 ) 转移 到 状态 j. 这 样 的 过 程 称 为 半 马 尔 可 夫 过 程 . 注意 如 果 过 程 在 
转移 以 前 在 每 一 个 状态 停留 的 时 间 恒 等 于 1, 那么 这 样 的 半 马 尔 可 夫 过 程 正 是 马尔 
可 夫 链 . 

现在 计算 半 马 尔 可 夫 过 程 的 忆 . 为 此 , 我 们 首先 考虑 使 过 程 进入 状态 i 的 转移 
比例 zi. 如果 以 Xn 记 在 n 次 转移 后 的 状态 , 那么 {Xn,n > 0} 是 一 个 以 {Pij,i,j = 
1,2,…, 入 } 为 转移 概率 的 马尔 可 夫 链 . 因此 , ri 正 是 这 个 马尔 可 夫 链 的 极限 (或 平 
稳 ) 概率 (4.4 节 ). 即 mi 是 方程 组 

N 


N 
ee (7.23) 
i=1 i=1 


i=1,2,3 


的 唯一 非 负 解 9. 现在 由 于 过 程 只 要 访问 状态 i, 就 在 i 停留 一 个 期 望 时 间 ju, 似乎 
显然 地 RP 应 该 是 x; 的 加 权 平 均 , 其 中 元 的 权重 是 ji, 即 


Ti 
三 222 (7.24) 
N t= 1 
Dj=1 Th 


其 中 xi 由 方程 (7.23) 的 解 给 出 . 
@ 我 们 假定 方程 组 (7.23) 存在 一 个 解 , 即 我 们 假定 马尔 可 夫 链 的 一 切 状态 都 是 互通 的 . 


P= 
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例 7.30 ”考虑 一 台 机 器 , 它 可 以 处 在 3 个 状态 之 一 : 良好 , 不 错 和 损坏 . 假设 这 台 
机 器 在 良好 时 将 以 平均 时 间 种 保持 这 种 状态 , 然后 它 分 别 以 概率 3/4 和 1/4 转变 
为 不 错 和 损坏 . 这 台 机 器 在 不 错时 将 以 平均 时 间 ja 保持 这 种 状态 , 然后 它 转变 为 
损坏 . 这 台 机 器 在 损坏 时 将 进行 修理 , 需要 用 平均 时 间 js, 在 修复 后 它 分 别 以 概率 
2/3 和 1/3 转变 为 良好 和 不 错 . 问 这 台 机 器 在 每 个 状态 的 时 间 的 比例 是 多 少 ? 

解 ” 令 这 些 状态 为 1、2、3, 由 方程 组 (7.23), 我 们 得 到 ri 满足 


2 3 1 
TI 十 T2 十 T3 一 1， MNM=a7, T2 一 了 TTl 十 本 T3， T3 一 了 TI1 十 T2 


3 at 了 
其 解 为 
1 2 
NN 和 Te 
因此 , 从 方程 组 (7.24) 我 们 得 到 机 器 在 状态 i 的 时 间 比 例 P 由 


dp i S12 613 
dp1 十 512 + 6143 dp1 + 5p2 十 613 dp1 + 512 + 613 
给 出 . 例如 , 若 jn = 5,p2 = 2,p3 = 1, 则 机 器 以 5/9 时 间 处 在 良好 的 状态 , 以 > 
时 间 处 在 不 错 的 状态 , 以 1/6 时 间 处 在 损坏 的 状态 . 
注 在 一 次 访问 中 , 在 每 个 状态 停留 的 时 间 数 量 的 分 布 是 连续 的 时 候 , P ie 
程 在 时 刻 t 处 在 状态 i 的 极限 ( 当 t 一 oo 时 ) 概率 . 
例 7.31 考虑 一 个 更 新 过 程 , 其 到 达 间 隔 分 布 是 离散 的 , 使 得 
P{X=i}=p i>1 

其 中 X 表示 到 达 间 隔 随 机 变 基 . 以 L(t) 记 包 含 时 间 点 上 的 更 新 区 间 的 长 度 ( 即 如 果 
N(t) 是 到 上 为 止 的 更 新 次 数 , 而 Xn 是 第 n 次 到 达 间 隔 时 间 , 那么 L(t) = X(t)+1). 
如 果 我 们 将 每 次 更 新 想 成 对 应 于 一 个 灯泡 的 失效 ( 它 将 在 下 一 个 周期 的 开始 换 以 一 
个 新 的 灯泡 ), 那么 如 果 在 时 刻 t 使 用 的 灯泡 在 它 的 第 i 个 使 用 周期 中 失效 , L(t) 将 
等 于 i 

容易 看 出 L(t) 是 半 马 尔 可 夫 过 程 . 为 了 确定 L(t) = j 的 时 间 比 例 , 注意 每 次 转 
移 ( 即 每 次 更 新 发 生 ) 至 下 一 个 状态 以 概率 pj 为 j. 即 丛 入 马尔 可 夫 链 的 转移 概率 
是 Pj = pj. 因此 , 嵌入 马尔 可 夫 链 的 极限 概率 由 


m=pj 
给 出 , 而 且 由 于 半 马 尔 可 夫 链 在 转移 发 生前 停留 在 状态 j 的 时 间 是 j, 由 此 推出 , 在 
状态 j 的 时 间 的 长 程 比例 是 


P= 


Jpj 
P= 二 本 
”Dip 
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7.7 检验 悖 论 


假设 一 个 设备 (例如 电池 ) 被 装配 使 用 直至 它 损坏 . 在 损坏 时 , 立刻 用 一 个 相似 
的 电池 替代 以 使 这 个 过 程 不 中 断 地 继续 . 以 N(t) 记 到 时 刻 上 为止 损坏 的 电池 数 , 则 
{NN(t),t > 0} 是 一 个 更 新 过 程 . 

进一步 假设 电池 寿命 的 分 布 FF 是 未 知 的 , 需要 用 以 下 的 样本 检查 方案 来 估计 . 
我 们 固定 某 个 t, 并 观察 在 时 刻 t 使 用 的 电池 的 总 寿命 . 由 于 下 是 所 有 电池 的 寿命 
分 布 , 似乎 它 也 应 该 是 这 个 电池 的 寿命 分 布 . 然而 , 这 是 一 个 检验 悖 论 , 因为 它 导出 
在 时 刻 上 正在 使 用 的 电池 倾向 于 有 比 普 通 的 电池 更 长 的 寿命 . 

为 了 理解 上 述 所 谓 的 悖 论 , 我 们 推理 如 下 . 在 更 新 理论 的 术语 中 , 我 们 关心 的 是 
包含 时 间 点 t 的 更 新 区 间 . 即 我 们 要 求 Xwto+l = SN(w)+1 一 Swvdo)( 见 图 7.2). 为 了 
计算 Xn(w+1 的 分 布 , 我 们 对 于 在 时 刻 上 以 前 (或 在 时 刻 t) 最 后 一 次 更 新 的 时 间 取 
条 件 . 即 

P{XN()+1 > 7} = E[P{XN(W+1 > zlSwd) = 上 一 引 
这 里 我 们 回忆 起 (图 7.2)Swte 是 在 时 刻 t 以 前 (或 在 时 刻 t) 最 后 一 次 更 新 的 时 间 . 
由 于 在 t 一 s 与 t 之 间 没 有 更 新 , 可 推出 , 如 果 s > z, XNw(0+1 必须 大 于 zx. 即 
P{XN()+1> zlSvto =t—s}=1， 若 s>z (7.25) 


另 一 方面 , 假设 s < z. 如 前 , 我 们 知道 有 一 次 更 新 发 生 在 时 刻 t 一 s, 而 且 在 t 一 s 与 
t 之 间 没 有 更 新 发 生 , 并 且 我 们 要 求 在 附加 的 z 一 s 时 间 没 有 更 新 发 生 的 概率 . 就 是 
说 , 我 们 正 是 求 在 给 定 一 个 到 达 间 隔 时 间 大 于 s 时 , 它 大 于 z 的 条 件 概率 . 所 以 , 对 
于 sgz 

P{XN()+1 > zlSNwdo =t— s} 
= P{ 到 达 间 隔 时 间 > z| 到 达 间 隔 时 间 > s} 
= P{ 到 达 间 隔 时 间 > z}/P{ 到 达 间 隔 时 间 > s} 
_ 1—F(z) 
1—F(s) 
>1— F(z) (7.26) 
因此 , 从 方程 (7.25) 和 方程 (7.26) 我 们 看 到 , 对 于 一 切 s 


P{XN(W+1 > TISN() =t—s} >1— F(z) 


对 两 边 取 期 望 得 
P{XN(W+1 > z} 21- F(z) (7.27) 


7.7 检验 悖 论 373 


然而 , 1 - F(z) 是 普通 的 更 新 区 间 大 于 z 的 概率 , 即 1 一 F(z) = P{X > z}, 从 而 方 
程 (7.27) 是 检验 悖 论 的 一 个 确切 陈述 , 它 说 明 包含 时 间 点 t 的 更 新 区 间 倾 向 于 比 普 
通 的 更 新 区 间 更 大 . 
注 为 了 得 到 所 谓 的 检验 悖 论 , 推理 如 下 : 我 们 想象 整个 直线 被 更 新 区 间 预 盖 ， 其 
中 一 个 包含 点 t. 覆盖 点 的 区 间 相 比 于 较 短 的 区 间 是 不 是 更 像 二 个 较 大 的 区 间 ? 

当 更 新 过 程 是 泊 松 过 程 时 , 我 们 可 以 明确 地 计算 Xn(w)+1 的 分 布 ， (注意 , 在 一 
般 情 形 , 我 们 不 需要 明显 地 计算 P{Xwto+l > z} 来 说 明 它 至 少 与 1 一 F(z) 一 样 大 .) 
为 此 , 我 们 写 出 

XN(+1 = A(t) + Y(t) 

其 中 A(t) 记 从 t 之 前 的 最 后 一 次 更 新 到 t 的 时 间 , 而 Y(t) 是 从 t 直到 下 一 次 更 新 
的 时 间 (参见 图 7.4). 4(t) 是 过 程 在 时 刻 t 的 年 龄 (在 我 们 的 例子 中 , 它 是 在 时 刻 t 
使 用 的 电池 的 年 龄 ), 而 Y(t) 是 过 程 在 时 刻 t 的 超额 奉命 ( 它 是 从 t 直到 电池 损坏 
的 附加 时 间 ). 当然 , 4(t) =t 上 一 Sv(w), Y(t) = Sw(w)+1 一 上 都 是 正确 的 . 


4140 一 ”一 一 X0) 一 一 一 


1 时 间 
图 7.4 


为 了 计算 Xn(w+1 的 分 布 , 我 们 首先 注意 重要 的 事实 : 对 于 泊 松 过 程 , A(t) 和 
Y(t) 是 独立 的 . 这 是 由 于 泊 松 过 程 的 无 记忆 性 质 , 从 t 直到 下 一 次 更 新 发 生 的 时 间 
是 指数 分 布 的 , 而 且 独 立 于 以 前 发 生 的 (特别 地 , 包含 A(t)). 事实 上 , 这 显示 如 果 
{N(b,t> 0} 是 速率 为 和 的 泊 松 过 程 , 那么 


P{Y(t) < 2}=1-e* (7.28) 


A(t) 的 分 布 可 以 如 下 地 得 到 


Puo>a-{ es 
上” 者 sct 
0, 若 z>t 


或 者 , 等 价 地 
—e*”, zxt 

(7.29) 
2 


P{A(t) < 2} = { E 


因此 , 由 A(t) 和 Y(t) 的 独立 性 可 得 , Xn(w+1 的 分 布 正 是 方程 (7.28) 的 指数 分 布 与 
方程 (7.29) 的 分 布 的 卷 积 . 注意 到 对 于 大 的 t, A(t) 近似 地 有 一 个 指数 分 布 . 于 是 ， 
对 于 很 大 的 上 Xwto+l 有 两 个 同 分 布 的 指数 随机 变量 的 卷 积 的 分 布 , 由 5.2.3 节 , 这 
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是 参数 为 (2, A) 的 伽 马 分 布 . 特别 地 , 对 于 很 大 的 t, 包含 点 t 的 更 新 区 间 的 期 望 长 
度 近 似 地 是 普通 更 新 区 间 的 期 望 长 度 的 两 倍 . 
利用 在 例 7.18 和 例 7.19 中 得 到 的 关于 平均 年 龄 与 平均 超额 寿命 的 结果 , 恒 等 
式 
XN(D+1 三 4(t) + Y(t) 


推出 包含 一 个 特殊 的 点 的 更 新 区 间 的 平均 长 度 是 


XN(w+idt EIX? 
eR 
其 中 XX 具有 到 达 间 隔 分 布 . 因为 除 X 是 常数 外 , E[X?] > (E[X])?, 这 个 平均 值 正如 
由 检验 悖 论 所 预料 的 , 大 于 普通 更 新 区 间 的 期 望 值 . 

我 们 可 以 用 一 个 交替 更 新 过 程 推理 确定 Xn()+1 大 于 c 的 时 间 的 长 程 比 例 . 为 
此 , 令 一 个 循环 对 应 于 一 个 更 新 区 间 , 并 且 如 果 包 含 t 的 更 新 区 间 的 长 度 大 于 c ( 即 
如 果 XN(w)+1 > o), 说 系统 在 时 刻 上 处 于 开 , 而 在 其 他 情形 就 说 系统 在 时 刻 t 处 于 
关 . 换 句 话说 , 如 果 一 个 循环 时 间 超过 c, 在 这 个 循环 中 系统 总 是 处 在 开 ; 如 果 这 个 
循环 时 间 不 超过 c, 在 这 个 循环 中 系统 总 是 处 在 关 , 于 是 , 如 果 X 是 循环 时 间 , 我 
们 有 


_ | 各 若 X>e 
在 循环 中 处 在 开 的 时 间 = { 0， 着 X&e 


所 以 , 我 们 由 交替 更 新 过 程 理论 得 到 


| 本 
Xwtbti > c 的 时 间 的 长 程 比例 = 站 人 s | 


其 中 f 是 到 达 间 隔 的 密度 函数 . 


7.8 ”计算 更 新 函数 


想 用 恒等式 ， 二 
m(t) = Fn(t) 
n=1 

计算 更 新 函数 的 困难 在 于 , 确定 Fa(t) = P{X1 + … 十 Xn 和 寺 需要 计算 nn 维 积分 . 
下 面 我 们 介绍 一 个 有 效 的 算法 , 它 只 需要 一 维 积分 作为 输入 . 

令 Y 是 一 个 速率 为 A 的 指数 随机 变量 , 而 且 假设 Y 与 更 新 过 程 {N(t),t > 0} 
独立 . 我 们 先 确定 到 随机 时 间 Y 为 止 的 期 望 更 新 次 数 E[N(Y)]. 为 此 我 们 先 对 首次 
更 新 的 时 间 Xi 取 条 件 . 这 就 得 到 
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ENGN = | PINODPG = aa (7.30) 
其 中 / 是 到 达 间隔 密度 . 为 了 确定 EIN(Y)|Xi = 本, 我 们 对 Y 是 否 超出 = 取 条 件 . 
现在 , 如 果 Y < z, 那么 因为 首次 更 新 发 生 在 时 刻 z, 就 推出 到 时 刻 Y 为 止 的 更 新 次 
数 等 于 0. 另 一 方面 , 如 果 我 们 给 出 了 z < Y, 那么 到 时 刻 了 为 止 的 更 新 次 数 等 于 
1 (在 z 的 那 一 个 ) 加 上 在 z 与 Y 之 间 的 附加 更 新 次 数 . 但 是 , 由 指数 随机 变 二 的 无 
记忆 性 质 推出 , 给 定 Y > z, 它 超过 z 的 数量 也 是 速率 为 和 的 指数 随机 变量 ， 所 以 
给 定 Y > z 在 z 与 Y 之 间 的 更 新 次 数 与 N(Y) 同 分 布 . 因此 
EIN(Y)IX1 =z,Y < 2]=0, 
EIN(Y)|X1 = z,Y > z] =1+E[N(Y)] 
所 以 
EIN(Y)|X1 = z]= EIN(Y)|X1 = z,Y < z]P{Y < z|X1 = z} 
+E[IN(Y)IX1 = z,Y > zJP{Y > z|X1 = z} 
二 EIN(Y)IX1 =z,Y > zjP{Y > z} 因为 Y 和 Xi 是 独立 的 
=(1+E[N(Y)])e-~¥ 
将 它 代入 方程 (7.30) 得 
EINGN = G+ ENO | yodz 
因此 二 
时 
EIN(Y)] = 1- Ble 


其 中 X 有 更 新 到 达 间 隔 分 布 . 

如 果 令 和 = 1/t, 那么 方程 (7.31) 给 出 了 (不 是 直到 t 为 止 , 而 是 ) 直到 一 个 具 
有 均值 t 的 随机 指数 分 布 时 间 为 止 的 平均 更 新 次 数 的 表达 式 . 然而 , 因为 这 样 的 随 
机 变 基 未 必 近 似 于 它 的 均值 ( 它 的 方差 是 妇 ), 方程 (7.31) 就 未 必 特 别 地 近似 m(t). 
为 了 得 到 一 个 精确 的 近似 , 假设 Y,…,Y。 是 速率 为 和 的 独立 指数 随机 变 基 , 而 且 
假设 它们 也 独立 于 更 新 过 程 . 对 于 7 = 1 ……m, 令 

mr = EIN(Yi +:…+Y)] 

为 了 算得 mr 的 表达 式 , 我 们 也 先 对 首次 更 新 的 时 间 Xi 取 条 件 ， 


mr= 上 E[IN(Yi + :+ Yr)|X1 = z]f(z)dr (7.32) 


为 确定 上 述 条 件 期 望 , 我 们 现在 对 部 分 和 并 :-: Yi 0 = 1,…,7) 中 小 于 z 的 个 数 取 
条 件 . 如 果 所 有 的 个 部 分 和 都 小 于 z, 那么 显然 直到 沁 ;_, 到 为 止 的 更 新 次 数 是 


(7.31) 
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0. 另 一 方面 , 如 果 给 定 kk < 7) 个 部 分 和 都 小 于 z, 由 指数 随机 变量 的 无 记忆 性 质 
推出 , 直到 ji_1 Xi 为 止 的 更 新 次 数 将 与 1 加 上 N(Yk+1 十 … 十 Y) 有 相同 的 分 布 . 
因此 


k= 
EIN(Yi+ +Y)|X1= ny 中 有 上 个 小 于 z)= os (7.33) 
i=1 1+rmr-k， 若 大 <r 
为 确定 小 于 z 的 部 分 和 的 个 数 的 分 布 , 注意 到 部 分 和 并 ;-; Yi (07 = 1,…,7) 中 相继 
的 值 与 速率 为 和 的 泊 松 过 程 的 前 个 事件 的 时 间 有 相同 的 分 布 (由 于 每 个 相继 的 部 
分 和 是 前 面 的 和 加 上 一 个 独立 的 速率 为 和 的 指数 随机 变量 ). 由 此 推出 ,对 于 kk<*， 


一 Az， 
Pp {mmx 中 有 大 个 小 于 z|Xi = +) 总 0. (7.34) 
i=1 
将 方程 (7.33) 和 方程 (7.34) 代入 方程 (7.32), 我 们 得 到 
m= Fa Tp) 0 f(z)dr 
k=0 
或 者 , 等 价 地 ， 
_ Drei + men)ELX*e XJOK/k) + Ele—**] (7.35) 


1— Ele-*X] 
如 果 令 入 = n/t, 那么 由 方程 (7.31) 先 给 出 mi, 我 们 可 以 利用 方程 (7.35) 递 推 地 
计算 m2,… ,mm，m(t) = ELNOb] 的 近似 由 mn = E[N(Yi 十 … 十 Y)] 给 出 由 
于 坟 十 … 十 是 nn 个 独立 的 指数 随机 变 基 的 和 , 每 一 个 有 均值 i/n, 由 此 推出 它 
是 均值 为 + 和 方差 为 n 与 = 全 的 仙 马 分 布 ,因此 , 只 要 计 取 n 很 大 , 忆 人 -1 将 
是 一 个 以 大 的 概率 集中 在 t 附近 的 随机 变 基 , 故而 了 LN (i_ 六 )] 将 十 分 地 近似 于 
E[N(t)]( 事 实 上 , 如 果 ml(t) 在 上 连续 , 可 以 证 明 当 n 趋 于 无 穷 时 , 这 些 近似 式 收敛 到 
mlt)). 
例 7.32 表 7.1 对 于 具有 密度 fi 的 分 布 Fi(i = 1,2,3) 的 近似 值 与 精确 值 作 了 比 
较 , 它们 由 
fi(z) = Ze” 

1— F(z) = 0.3e-* 十 0.7e-2z 

1— Fs(z) = 0.5e-z 十 0.5e-57 
给 出 . 图 
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表 7.1 近似 m(t) 
到 精确 值 近 似 值 
i t ml(t) n=1 n=3 n=10 n=25 n=50 
1 1 0.2838 0.3333 0.3040 0.2903 0.2865 0.2852 
1 2 0.7546 0.8000 0.7697 0.7586 0.7561 0.7553 
1 5 2.250 2.273 2.253 2.250 2.250 2.250 
1 10 4.75 4.762 4.751 4.750 4.750 4.750 
2 01 0.1733 0.1681 0.1687 0.1689 0.1690 一 
2 0.3 0.5111 0.4964 0.4997 0.5010 0.5014 一 
2 0.5 0.8404 0.8182 0.8245 0.8273 0.8281 0.8283 
2 1 1.6400 1.6087 1.6205 1.6261 1.6277 1.6283 
2 3 4.7389 4.7143 4.7294 4.7350 4.7363 4.7367 
2 10 15.5089 15.5000 15.5081 15.5089 15.5089 15.5089 
3 0.1 0.2819 0.2692 0.2772 0.2804 0.2813 
3 0.3 0.7638 0.7105 0.7421 0.7567 0.7609 一 
1 2.0890 2.0000 2.0556 2.0789 2.0850 2.0870 
3 3 5.4444 5.4000 5.4375 5.4437 5.4442 5.4443 
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一 个 具有 独立 的 到 达 间 隔 时 间 Xi, X2,… 的 计数 过 程 称 为 延迟 更 新 过 程 或 广 

义 更 新 过 程 , 如 果 Xi 与 同 分 布 的 随机 变量 X2, X3,… 有 不 同 的 分 布 . 即 一 个 延迟 

更 新 过 程 是 首次 到 达 间 隔 时 间 不 同 的 分 布 的 更 新 过 程 . 延迟 更 新 过 程 常 常 出 现在 实 

践 中 , 而 注意 很 重要 的 是 , 所 有 关于 到 时 刻 t 为 止 的 事件 个 数 N(t) 的 极限 定理 仍然 
有 效 , 例如 ， 

EING] 1 Var(N(D) 02 

和 t 

仍然 正确 , 其 中 心 和 o? 是 到 达 间 隔 Xi (i > 1) 的 均值 和 方差. 


7.9.1 ”离散 随机 变量 的 模式 


令 访 ,X2,… 是 独立 的 ,有 P{Xi== 站 二 Pp(j),7 > 0, 而 以 T 记 模式 z1,…,zr 首 
次 出 现 的 时 间 . 如 果 我 们 说 一 个 更 新 在 时 刻 n (n >7) 发 生 , 如果 (Xn-_r+1,…, Xn) = 
(z1… ,zr), 那么 {N(n),n > 1} 是 一 个 延迟 更 新 过 程 , 其 中 N(n) 记 直到 时 刻 n 为 
止 的 更 新 次 数 . 由 此 推出 
EIN(n)] 1 


一 一 一 一 -， 当 n 一 吕 时 (7.36) 
n kp 


当 t 一 oo 时 
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Vo 当 n 一 oo 时 (7.37) 

n E 
其 中 必 和 c 分 别 是 相继 的 更 新 之 间 的 时 间 的 均值 和 标准 差 . 在 3.6.4 节 我 们 已 经 介 
绍 了 如 何 计算 T 的 期 望 值 , 现在 我 们 介绍 如 何 利 用 更 新 理论 的 结果 来 计算 T 的 均 
值 和 方差 两 者 . 

开始 , 如 果 在 时 刻 i 存在 一 个 更 新 则 令 I(i) 等 于 1, 否则 令 它 为 0, i > 7. 同时 ， 
令 p=Tli=17(zi). 因为 

p= 和 = 

由 此 推出 I(i)(i > >) 是 参数 为 p 的 伯 努 利 随机 变量 . 现在 


N(n) = > 70) 


所 以 
EIN(m] = D EL) = (n—r+1)p 


im 


除 以 mw 并 且 让 m 一 co, 从 方程 (7. 36) 给 出 
1=1/p (7.38) 
即 在 相继 出 现 这 个 模式 之 间 的 平均 时 间 等 于 1/p. 同样 
Var(N(n)) 本 
n 


n n—l 
1 9 Var(1() 十 2 > 》 Cov(7Gi),707)) 
i=r i=r n>j>i 
n—r+l 2 We 
= > bb Cov(1(i), 1()) 
i=r i<jSmin(i+r—l1,n) 
其 中 最 后 的 等 式 用 了 事实 : 当 |i 一 j|>" 时, I(i) 与 1(j) 是 独立 的 , 故而 有 零 协 方 
差 . 令 n 一 co, 并 且 用 事实 : Cov(7(i),7(7)) 只 通过 |i 一 j 依赖 于 i 和 jj, 给 出 
r—l 
=p(1—p)+25 Cov(I(r), T(r +)) 
1 j=1 


所 以 , 用 方程 (7.37) 和 方程 (7.38), 我 们 有 


T 一 1 
og?2=p (1-p)+2p ?YCov(T(r), T(r + 3)) (7.39) 
j=1 
我 们 现在 考虑 在 模式 中 重生 的 数量 . 重 释 等 于 在 一 个 模式 中 的 结束 部 分 是 下 一 
个 模式 的 开始 部 分 的 值 的 个 数 . 如 果 对 于 所 有 大 = 1，……,r 一 1 (ir-kH itr) 关 
人，……, 拓 ), 那么 重 琶 具有 大 小 0; 而 如 果 
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k= max{j <7: (bit = (全 


具 k> 0, 那么 重合 称 为 具有 大 小 k. 例如 , 模式 0, 0, 1, 1 有 重合 0, 而 模式 0, 0, 1， 
0, 0 有 重合 2. 我 们 考虑 两 种 情形 . 

情形 1: 模式 的 重 又 是 0 

在 这 种 情形 , {N(n),n > 1} 是 一 个 普通 的 更 新 过 程 , 而 了 与 具有 均值 /4 和 方 
差 o? 的 到 达 间 隔 时 间 有 同样 的 分 布 . 因此 , 从 方程 (7.38) 可 得 


EIT] =p= : (7.40) 


同样 , 由 两 个 模式 不 能 在 彼此 距离 小 于 7 时 出 现 , 推出 当 1<j<r 一 1 时 T(r)I(r 填 
j) = 0. 因此 ， 
Cov(I(7), T(r +))) = -ET(r)]EL(r+j)]=-pP， 若 1<j<r-l. 
从 而 由 方程 (7.39) 我 们 得 到 
Var(T)= 0 =p (1—p) -2p 3(r— p=p?— (2r -1p (7.41) 
注 ”对 于 “ 军 见 ”的 模式 的 情形 , 如 果 模 式 在 到 某 个 时 刻 n 为 止 还 没有 发 生 , 那么 
我 们 似乎 没有 理由 相信 , 形成 模式 余下 的 时 间 将 比 我 们 一 开始 乱 写 余下 的 时 间 少 得 
多 , 即 似乎 分 布 是 近似 无 记忆 的 , 而 因此 是 近似 地 指数 分 布 的 . 于 是 , 由 于 指数 随机 
变量 的 方差 是 均值 的 平方 , 我 们 期 望 当 六 很 大 时 有 Var(T) 心 E?[T], 而 这 由 上 面 所 
证 实 , 它 说 明 Var(T) = E?[T] - (2r -1)E[T]. 
例 7.33 ”假设 我 们 想 要 知道 抛掷 一 枚 均匀 的 硬币 在 模式 “ 正 、 正 、 反 、 正 、 反 ”出 
现 前 需要 抛掷 的 次 数 ， 对 于 这 个 模式 , + = 5,p = 1/32, 而 重合 为 0， 因 此, 从 方程 
(7.40) 及 方程 (7.4.1) 得 到 
EIT] = 32， Var(T) = 322 — 9 x 32 = 736, 
以 及 
Var(T)/E2[T] = 0.718 75 
另 一 方面 , 若 p(i) = i/10,i = 1,2,3,4, 而 模式 是 1, 2, 1, 4, 1, 3, 2, 则 > = 7,p = 
3/625 000, 而 重合 为 0. 同样 由 方程 (7.40) 和 方程 (7.41), 我 们 看 到 在 此 情形 有 
E[T] = 208 333.33, Var(T) = 4.34 x 1010， 


Var(T)/E2[7] = 0.999 94 


情形 2: 模式 的 重 又 是 k 
在 这 种 情形 ， 
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其 中 下 是 直到 模式 记 ,… ,i 出 现 的 时 间 , 而 T* 是 从 谎 ,… ,i 得 到 模式 
诺 ,…,ir 用 的 附加 时 间 , 它 与 更 新 过 程 的 到 达 间 隔 时 间 同 分 布 ， 因 为 这 些 随机 变 
量 都 是 独立 的 , 我 们 有 


E[T] = E[T as] + EIT"] (7.42) 
Var(T) = Var(Ti in) 十 Var(T”) (7.43) 

现在 , 由 方程 (7.38) 
ElT]=4=p7 (7.44) 


同样 , 由 于 没有 两 个 更 新 可 能 在 彼此 距离 7 一 一 1 内 出 现 , 由 此 推出 , 当 1 <J < 
"一 上 一 1 时 T(r)I(r 二 四 =0. 所 以 , 由 方程 (7.39) 我 们 有 


r—1 
Var(T”) =0? =p *(1 —7)+2p™ ( 3 EPIr+) (7— o] 


j=r—k 


T 一 】 
= 一 (2r 一 D)p +2p 3 > ，E[I(r)rr+ 相 (7.45) 
j=r—k 


在 方程 (7.45) 中 的 其 E[T(r)T(r + 让] 可 以 通过 考察 特殊 模式 算得 , 为 了 完成 了 的 前 
两 个 矩 的 计算 , 我 们 重复 同样 的 方法 计算 Ti …i 的 均值 和 方差 . 

例 7.34 ”假设 我 们 要 确定 抛掷 一 枚 均匀 的 硬币 直到 模式 “ 正 、 正 、 反 、 正 、 正 ” 出 
现 的 抛掷 的 次 数 . 对 于 这 个 模式 , > = 5,p = 1/32, 而 重 蚕 参 数 是 大 = 2. 因为 


E[T(5)7(8)] = P{h,h,t,h, h,t,h,h} = i 
E[7(5)7(9)] = P{ ht, h,h, h,t,h,h} = 击 
由 方程 (7.44) 和 方程 (7.45) 我 们 有 
EIT*] = 32, Var(T*) = (32)? — 9(32) + 2(32)3 (过 十 志 ) =1120 
因此 , 由 方程 (7.49) 和 方程 (7.43), 我 们 得 到 
EIT] = PIT] + 32, Var(T) = Var(Th,h) + 1120 


现在 考察 模式 “ 正 、 正 ”". 它 有 7 = 2,P = 1/4, 而 重重 参数 是 1， 由 于 这 个 模式 
EI7(2)7(3)] = 1/8, 如 前 , 我 们 得 到 
ElTh,n] = E[T;] + 4, 


Var(Th,n) = Var(Th) + 16— 3(4)+2 (号 ) = Var(T) + 20 
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最 后 , 对 于 模式 “ 正 ", 有 7 = 1,p = 1/2, 由 方程 (7.40) 和 方程 (7.41) 我 们 有 
E[m] =2，YVar(Th) =2 
将 所 有 的 合 起 来 给 出 
EIT] = 38， Var(T) = 1142， Var(T)/E?[T] = 0.79086 国 
例 7.35 假设 PLXn = 计 = pi, 并 且 考虑 模式 0, 1, 2, 0, 1, 3, 0, 1. 那么 r = 8， 
P 了 二 PBp3p2p3 , 而 重合 参数 是 上 = 2. 由 于 
E[7(8)7(14)] = ppip3p3, El[I(8)1(15)] = 0 
由 方程 (7.42) 和 方程 (7.44) 我 们 看 到 
EIT] =E[Toi] +p-! 

而 由 方程 (7.43) 和 方程 (7.45) 有 

Var(T) = Var(To1) +p™? — 15p"! +2p (popl)-! 
现在 , 模式 0,1 的 + 和 op 的 值 是 7(0,1) = 2,p(0,1) = pop1, 而 这 个 模式 具有 重合 0. 
因此 , 由 方程 (7.40) 和 方程 (7.41)， 

EITba] = (popi)- ， Var(To1) = (pop1)™? — 3(pop1)™ 

例如 , 若 = 0.2,i = 0,1,2,3, 则 

EIT] = 25 + 58 = 390 650 

Var(T) = 625 — 75 + 516 -+ 35 x 58 = 1.526 x 1011 

Var(T)/E2[T] = 0.999 96 
注 ”可 以 证 明了 是 一 类 称 为 新 优 于 昌 (NBU) 的 离散 随机 交 量 , 其 粗略 含义 是 , 如 果 
模式 直到 某 个 时 刻 n 为 止 还 没有 出 现 , 那么 到 模式 出 现 的 附加 时 间 倾 向 于 小 于 在 这 


个 点 整个 地 开始 使 模式 出 现 所 用 的 时 间 . 大 家 知道 这 样 的 随机 变量 满足 ( 见 参考 文 
献 团 中 的 命题 9.6.1) 

Var(T) < E?[T] — EIT] < E?[7] Bl 

现在 假设 有 s 个 模式 A(1),…, 4(s), 而 我 们 要 求 直到 其 中 一 个 模式 出 现 的 平 

均 时 间 和 首先 出 现 的 那个 模式 的 概率 质量 函数 . 不 失 一 般 性 , 我 们 假定 这 些 模式 中 

没有 一 个 包含 于 任意 的 其 他 一 个 之 中 ( 即 我 们 排除 如 4(1) =“ 正 、 正 ”和 4(2) = 

“ 正 、 正 、 反 ”这 样 的 无 趣 情形 ). 为 了 确定 这 些 基 , 以 T(i) 记 直至 模式 A(i) 出 现 

的 时 刻 , i = 1,…,s, 而 以 T(i,j) 记 从 模式 A(i) 出 现 开始 直至 模式 4(7) 出 现 的 附 

加 时 间 , i 关 j. 先 计算 这 些 随机 变量 的 期 望 值 . 我 们 已 经 展示 了 如 何 计算 E[T(2)]， 

i 二 1,.…,s. 使 用 同样 的 方法 计算 EI[T(i,j)] 时 , 考虑 在 A(i) 的 最 后 部 分 与 4(7) 的 
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开始 部 分 之 间 的 任何 重合 . 例如 , 假设 4(1) = 0,0,1,2,0,3, 而 4(2) = 2,0,3,2,0. 那 
么 
T(2) = Ta,0,s +T(1,2) 


其 中 7T2,0,3 是 得 到 模式 2, 0, 3 的 时 间 , 因此 ， 
EI[T(1,2)] = EIT(2)] — E[72,0.3] = (p&pép3)™ + (pop2)™! 一 (papops)- 
所 以 , 现在 假设 所 有 的 其 E[T(i)] 和 E[T(i,j)] 已 经 算出 . 令 
M = minT(i) 

再 令 

Pli)=P{M=T()}, i=L,..,s 
即 P(i) 是 模式 A(i) 为 首先 出 现 的 模式 的 概率 . 现在 对 于 每 个 j, 我 们 推导 E[T(j)] 
满足 的 一 个 方程 如 下 : 


EITO)=EIM]+ EITG) — M] = EIM]+ EIT(i, NPG), j=1,.,s (7.46) 
ey 


其 中 最 后 的 等 式 是 通过 对 首先 出 现 的 那个 模式 取 条 件 得 到 的 . 但 是 方程 (7.46) 和 
方程 。 

Dj P=1 

i=1 


一 起 构成 s + 1 个 未 知 数 ELM] 和 P(i)(i=1,…,s) 的 一 组 s+1 个 方程 . 求解 它们 
就 导出 所 要 的 基 . 
例 7.36 ”假设 我 们 连续 地 抛掷 一 枚 均匀 的 硬币 . 对 于 4(1) =" 正 ,有 反 、 反 、 正 、 正 ” 
和 4(2) = “ 正 、 正 、 反 、 正 、 反 ”, 我 们 有 
E[T(1)] = 32 + E[T,] = 34， 
EIT(2)] = 32, 
E[T(1,2)] = E[T(2)] — E[T%,n] = 32 — (4+ E[T,]) = 26, 
E[T(2,1)] = E[T(1)] — ElTh] = 34—4= 30 
因此 , 我 们 需要 求解 方程 组 
34=E[IM]+30P(2), 32=E[M]+26P(1), 1= PG)+P(2) 
这 些 方程 易于 求解 , 并 由 此 导出 
P(1) = P(2) = 到 E[M] = 19 
注意 虽然 出 现 模式 4(2) 的 平均 时 间 小 于 模式 4(1) 的 平均 时 间 , 但 是 每 一 个 都 有 相 
同 的 机 会 先 出 现 . 国 
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当 这 些 模 式 中 的 任意 一 个 都 没有 重 到 时 , 方程 (7.46) 容易 求解 . 在 这 种 情形 , 对 
于 一 切记 
EIT(i,)] = ELT()] 


所 以 方程 (7.46) 简化 为 
ETO)]=EMI+(- PO)ETO) ， 
因此 
PQ) = ELIM]/E[T (7)] 
对 上 式 遍及 所 有 的 j 求 和 导出 
时 
MW rao a 
p0) = HET) i 


3-1 VETO 
在 下 一 个 例子 中 , 我 们 用 上 述 结果 重新 分 析 例 7.7 的 模式 . 
例 7.37 ”假设 游戏 的 每 一 局 的 结果 都 与 以 前 的 各 局 是 独立 的 , 玩家 i 赢 的 概率 为 
pusi = 1 …,s. 还 假设 有 一 些 特殊 的 数 n(1),…,n(s), 使 先 连续 地 赢得 n(i) 局 的 玩 
家 i 被 宣布 为 比赛 的 得 胜 者 . 求 直 至 有 一 个 玩家 得 胜 的 平均 局 数 , 并 求 玩家 i 得 胜 
的 概率 , i = 1，…,s. 
解 ” 对 于 i= 1,…,s, 以 A(i) 记 i 的 连续 n(i) 个 值 的 模式 , 这 个 问题 在 于 求 模式 
A(i) 先 出 现 的 概率 P(i) 以 及 求 E[M]. 因为 

n(i) 
EITG)] = (1/pi)"® + (1/p)™ 十 … 十 1/pi = -下 一 
Pi (1 一 Di) 


由 方程 (7.47) 和 (7.48), 我 们 得 到 


EIM] = 


Dl (1 -pi)/( -p70) 

PO p/P) 
Dp —p;)/( p70) 
7.9.2 不 同 值 的 最 大 连贯 的 期 望 时 间 


令 Xili > 1) 是 独立 同 分 布 的 随机 变量 , 等 可 能 地 取 1,2,…,m 中 的 任意 一 个 
值 . 假设 这 些 随 机 变 基 相继 地 被 观测 , 而 以 了 记 包含 所 有 的 值 1,2,…,m 的 m 个 
相继 的 值 的 连贯 首次 出 现 的 时 刻 . 即 


T= min{n : Xn_m+1,… ,Xn 都 不 同 } 


P(i) = 
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为 了 计算 E[T], 由 首次 更 新 出 现在 T 确定 一 个 更 新 过 程 . 从 这 时 间 开 始 , 而 不 使 用 
前 的 数据 值 , 令 下 一 次 更 新 出 现在 下 一 次 m 个 相继 的 值 都 不 同 的 连贯, 依 此 类 推 . 
例如 , 若 m = 3, 而 数据 是 

I (7.49) 


则 到 时 刻 10 为 止 有 两 次 更 新 , 更 新 发 生 在 时 刻 5 和 9. 我们 将 m 个 不 同 值 构成 的 
一 个 更 新 称 为 更 新 连贯 . 

现在 我 们 将 这 个 更 新 过 程 转化 为 一 个 延迟 更 新 报酬 过 程 , 假设 对 于 n > m, 如 
果 值 X,_-m+l1……,Xn 都 不 相同 , 就 在 时 刻 n 赚 得 报酬 1. 即 每 次 前 面 的 m 个 数据 
都 不 相同 时 赚 得 一 个 报酬 . 例如 , 若 m = 3, 而 数据 值 如 (7.49) 中 所 示 , 则 一 个 单位 
的 报酬 分 别 在 时 刻 5、7、9 和 10 赚 得 . 如 果 我 们 以 R; 记 在 时 刻 i 所 赚 的 报酬 那么 
i mE ,有 _ EIR] 

一 一 = 一 = Ed] (7.50) 


im 


其 中 R 是 在 更 新 时 刻 之 间 所 赚 的 报酬 . 议和 以 hi 记 一 个 更 新 连贯 的 前 i 个 数据 
值 的 集合 , 而 Bi 是 紧 跟 这 个 更 新 连贯 的 前 i 个 数据 值 的 集合 , 我 们 有 


mm 一 1 
E[R] = 1 十 志 E[ 在 一 个 更 新 后 的 时 刻 i 赚 的 报酬 ] 


1 
-1+ P= B=1+ 守 六 - 守 识 (7.51) 
因此 , 由 于 对 于 i> mm， 
PIR] =P{Xi_mrl,…,Xi 都 不 相同 } = 2 
由 此 , 从 方程 (7.50) 推出 
ml ER 
mm ET] 
于 是 , 由 方程 (7.51), 我 们 得 到 


m m—l 
EIT] = 5 和 im 

以 上 的 延迟 更 新 报酬 过 程 的 方法 ， 也 给 了 我 们 另 一 个 途径 来 计算 直至 一 个 特殊 的 模 

式 出 现 的 期 望 时 间 . 我 们 用 以 下 例子 来 阐明 . 

例 7.38 计算 当 一 枚 以 概率 p 出 现 正面 , 而 以 概率 g = 1 一 p 出 现 反 面 的 硬币 被 连 

续 地 抛 毛 时 , 直到 模式 “ 正 、 正 、 正 、 反 、 正 、 正 、 正 ”出 现 的 期 望 时 间 E[T]. 

解 ”定义 一 个 更 新 过 程 , 令 这 个 模式 首次 出 现时 为 首次 更 新 , 然后 再 重新 开始 . 同 

时 , 只 要 这 个 模式 出 现 , 就 说 赚 了 一 个 报酬 . 如 果 R 是 在 更 新 时 刻 之 间 所 赚 的 报酬 ， 

我 们 有 
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6 
EIR= 1+ > E [在 一 个 更 新 后 的 时 刻 i 赚 的 报 柄 | 


=1+0+0+0+p3g+p3gp+ psgp? 
因此 , 由 于 在 时 刻 i 所 赚 的 期 望 报酬 是 E[Ri] = pig, 我 们 由 更 新 报酬 定理 得 到 


人 
1+gpr + op +ap _ os 
EI[T] 


从 而 
ElT]=q pp +p ?+p 十 PT 图 
7.9.3 ”连续 随机 变量 的 递增 连贯 
令 Xi1,X2,… 是 独立 同 分 布 的 连续 随机 变 基 列 , 而 以 了 记 首次 有 一 串 ” 个 相 
继 的 递增 值 出 现 的 时 间 , 即 
了 T=min{fn >r:Xn-r+l<Xn-r+2<…<Xn} 
为 了 计算 E[T], 定义 一 个 更 新 过 程 如 下 . 令 首次 更 新 发 生 在 T. 然后 , 只 利用 了 以 


后 的 数据 值 , 当 又 存在 > 个 相继 的 递增 值 时 , 就 说 下 一 次 更 新 发 生 , 并 且 继 续 如 此 的 
方式 . 例如 , 若 + = 3, 而 前 面 的 15 个 数据 值 为 


12, 20, 22, 28, 43, 18, 24, 33, 60, 4, 16, 8, 12, 15, 18 
则 直至 时 刻 15 为 止 发 生 了 3 次 更 新 , 即 在 时 刻 3、8 和 14. 如 果 我 们 以 N(n) 记 到 
时 刻 n 为 止 的 更 新 次 数 , 那么 由 基本 更 新 定理 
ENm)] 1 
n EI] 
为 了 计算 EIN(n)], 定义 一 个 随机 过 程 , 它 在 时 刻 上 的 状态 记 为 Sk, 它 等 于 在 时 刻 人 
的 相继 递增 的 值 的 个 数 . 即 对 于 1 < j < 上， 
Sk = 二 j， 如 果 Xk-j > 和 kr-i+H1< < Xk-1 < Xk 

其 中 Xo = co. 注意 更 新 发 生 在 时 刻 当 且 仅 当 , 对 于 某 个 i> 1 有 Sk = ir. 例如 ， 


车"=3, 而 且 
Xs > Xe < Xr7 < Xs < Xo < XIio < X11 


那么 
S6=1, Sr=2, Ss8=3, S59=4, Sio=5, Sun=6 
并 且 更 新 发 生 在 时 刻 8 和 11. 现在 , 对 于 大 > 小 
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P{Sk = 办 = P{XK- > Xk-iH1<…< Xk1 < Xk} 
=P{Xk-jt1 < < Xk-1 < Xr} 
—P{Xk-j < Xk-i+1<… < Xk < XR} 
1 , 


G+ 
= 
G+1)! 
其 中 倒数 第 二 个 等 式 是 由 于 这 些 随机 变 基 的 所 有 的 排序 都 是 等 可 能 的 
从 上 面 我 们 看 到 
UP 一 个 更 新 发 生 在 时 记 时 = im》 P{St 一 =》 i 


然而 
EIN()] = DP{ 一 个 更 新 发 生 在 时 刻 人 
k=1 


因为 我 们 能 够 证 明 对 于 任意 ak, 上 > 1, 只 要 limk-,oo ax 存在 , 就 有 


从 上 面 用 基本 更 新 定理 , 我 们 得 到 


1 
Wo Fe/ 


7.10 ”保险 破产 问题 


假设 保险 公司 的 理赔 按 速率 为 ~ 的 泊 松 过 程 到 达 , 而 相继 的 理赔 额 73,Y,… 
是 独立 随机 变量 , 具有 密度 为 f(z) 的 共同 分 布 函数 已 . 再 假设 理赔 额 独立 于 理赔 到 
达 的 时 间 . 于 是 ,如 果 我 们 令 M(t) 记 直 到 时 刻 t 为 止 的 理赔 的 次 数 , 那么 于 MY 
是 到 时 刻 t 为 止 付出 的 总 理赔 额 . 假定 公司 初始 资本 为 zx, 而 且 以 单位 时 间 常数 速 


率 收 到 保险 金 , 我 们 想 求 公司 的 净 资金 最 终 变 成 负数 的 概率 , 即 我 们 想 求 
MI(t) 
R(z) =P{ 对 于 菜 个 +20 有 DY >z+ct}. 
=1 


如 果 公 司 的 资金 最 终 变 成 负 的 , 我 们 说 公司 破产 了 . 于 是 R(z) 是 初始 资本 为 了 


的 公司 破产 的 概率 . 
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令 k= E[W] 是 平均 理赔 额 , 而 且 令 p= 和 p/c. 因为 理赔 以 速率 和 发生, 付出 的 
钱 的 长 程 速率 为 和 (一 个 正式 的 推理 是 用 更 新 报酬 过 程 . 当 一 个 新 的 理赔 发 生 时 作 
为 一 个 新 的 循环 开始 , 这 个 循环 的 价格 是 理赔 额 , 所 以 长 程 平均 价格 是 一 个 循环 引 
起 的 平均 价格 4 除 以 平均 循环 时 间 1/ 和 ). 因为 保险 金 以 速率 < 收 到 , 显然 , 当 p > 1 
时 , R(z) = 1. 因为 当 p = 1 时 , 可 以 证 明 R(z) 也 等 于 1 (想到 对 称 随机 游 动 的 常 返 
性 ) , 我 们 假设 p < 1. 

为 了 确定 R(z), 我 们 先 推导 一 个 微分 方程 . 首先 考虑 在 前 h 个 单位 时 间 会 发 生 
什么 , 其 中 很 小 . 这 时 , 以 概率 1 一 和 Mh+o(h) 将 没有 理赔 , 而 在 时 间 h 公司 的 资金 
是 z+ch; 而 以 概率 M+o(h) 恰 有 一 次 理赔 , 而 在 时 间 h 公司 的 资金 是 z+ch 一 Ys 
又 以 概率 o(h) 有 两 次 或 两 次 以 上 的 理赔 . 所 以 , 对 在 前 h 个 单位 时 间 能 发 生 的 事件 
数 取 条 件 导 出 

R(z) = (1 — M)R(z + ch)+M E[R(z + ch— Y1)] +o(h) 
等 价 地 
R(z + ch) — R(x) = Mh R(z + ch) — M E[R(z + ch— Yi)] +o(h) 
除 以 ch 得 
R(z + ch)— R(z) _ 
ch 


今 h 趋 近 于 0, 导出 微分 方程 
Ra) = Ra) - >PIR(z — ¥)] 
为 当 w < 0 时 Ry 一， 上 而 可 hI 记 
R= SR | Re fay 


Re 二 二 plRt + ch— 7) 二 上 Eo 


或 者, 等 价 地 2 
Ra = LR) -2 | Res -wl)ay ~ SEC) (7.52) 


其 中 F(z)=1- F(z). 
现在 我 们 利用 上 述 方程 证 明 R(z) 也 满足 方程 


R(z) = R(0)+ 2 上 R(z — YF(y)dy 一 | F(y)dy, z>0 (7.53) 
为 了 验证 方程 (7.53), 我 们 对 它 的 两 边 微分 以 导出 方程 (7.52)( 可 以 证 明 (7.52) 和 


(7.53) 两 者 都 有 唯一 的 解 ). 为 此 我 们 需要 下 述 引 理 , 其 证 明 将 在 本 节 最 后 给 出 . 
引 理 7.5 “对 于 函数 大 以 及 可 微 函 数 寺 有 


Eendy = 00) + | ee-nkouy 
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通过 用 上 面 的 引 理 , 对 方程 (7.53) 两 边 求 导 得 
尽 (z) = 2 [evr 十 [ R(z—yF(y)dy— zol (7.54) 


通过 分 部 积分 [u = F(y), dv = R'(z 一 y)dy] 可 得 
| RewF way= -FR Wi- | Re wf)ay 
= -F(a)R(O) + Re) -| Re f(y 


将 这 个 结果 代 回 方程 (7.54), 就 给 出 方程 (7.52). 于 是 我 们 建立 了 方程 (7.53). 
为 了 得 到 R(z) 的 更 有 用 的 表达 式 , 考虑 一 个 更 新 过 程 , 它 的 到 达 间 隔 时 间 
X1,X2,… 按 下 的 平衡 分 布 分 布 , 即 Xi 的 密度 函数 是 


f= Fl0) = 


以 Nb) 记 直 至 时 刻 + 为 目的 更 新 次 数 , 让 我 们 对 
om) 一 Elpse 
推导 一 个 表达 式 ,对 X 取 条 件 , 给 出 
«n= Bp = yay 
因为 给 定 Xi 一 当 y < z 时 直至 时 刻 z 为 的 更 新 次 数 与 1+ Ntz 一切 同 分 
而 当 y > z 时 恒 等 于 0, 我 们 看 到 


PEIoNwe-n+t]， 若 y 和 z 


N(x)+1 =1M= 
El |Xa = 要 { 六 i 
所 以 , gq(z) 满足 


oo- pa(z 一 Day + Zu 


4 


二 | qe — WF(Wdy+ 2 :| F(y)dy — 上 Fw 


[3 


因为 q(0) = p, 这 恰好 是 R(z) 满足 的 同一 个 方程 , 即 方程 (7.53). 因为 (7.53) 的 解 
是 唯一 的 , 我 们 就 得 到 如 下 的 命题 . 
命题 7.6 


= [ae -wr to S| Fay 


R(z) = q(x) = ElpN®)+]] 
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例 7.39 ”假设 公司 开始 没有 任何 资本 . 于 是 , 因为 N(0) = 0, 我 们 看 到 公司 的 破产 
概率 是 R(0) = p. 
例 7.40 ”如 果 理赔 分 布 是 均值 为 的 指数 分 布 , 那么 F 也 是 指数 分 布 . 因此 ， 
N(z) 是 均值 为 z/n 的 泊 松 过 程 , 它 给 出 结果 


R(z) PE ElpN(®)+1] = pntie-s/e(a/p)r /nt [9 
n=0 


= pe—*/t (pz/p)" /nl 站 
n=0 


= perz(L-P)/ 
为 了 得 到 破产 概率 , 令 了 独立 于 具有 到 达 间隔 分 布 及 的 更 新 过 程 的 到 达 间隔 
时 间 Xi 而且 有 概率 质量 函数 
P{T=n}=p"(1-—p), n=0,1,.… 
现在 考虑 前 了 个 X 的 和 超过 z 的 概率 了 {于 ,Xs > z}, 因为 N(z) + 1 是 在 时 刻 
了 后 的 首次 更 新 , 所 以 
N(z)+1= mm 人 8 SD > + 


i=1 
因此 , 对 直至 z 为 止 的 更 新 次 数 取 条 件 , 给 出 
C4 oo Tr 
P 位 Ws :| =》P 位 和 >z|wz) = 中 P{N(z) = 人 轿 
i=1 j=0 i=1 
=D_P{T 2j+1IN(z) =j}P{N(z) = 中 
j=0 
= PIT>j+1lP{N(z)= 人 办 
j=0 
= DPtP{N(z) =} 
j=0 
= Elowtot] 
从 而 , P {> 全 Xi > *} 等 于 破产 概率 . 现在 , 正如 在 例 7.39 中 注意 到 的 , 初始 资本 
为 0 的 公司 的 破产 概率 是 p. 假设 公司 初始 资本 为 z, 而 且 在 此 刻 假设 即使 它 的 资 
金 变 成 负 的 公司 仍然 运行 . 因为 公司 的 资金 曾经 下 降 到 它 的 起 始 金额 z 以 下 的 概率 
和 它 开始 于 0 的 资金 曾经 变 成 负 值 的 概率 相同 , 这 个 概率 也 是 p. 于 是 只 要 公司 的 
资金 变 得 低 于 它 以 前 所 有 的 值 我 们 说 发 生 了 一 次 新 低 , 那么 曾经 发 生 一 次 新 低 的 概 
率 是 p. 现在 如 果 一 次 新 低 出 现 了 , 那么 存在 另 一 次 新 低 的 概率 , 它 是 使 公司 的 资金 
下 降 到 低 于 前 一 次 新 低 的 概率 , 而 显然 这 也 是 p. 所 以 每 次 新 低 以 概率 1 一 p 是 最 后 
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的 一 个 . 因此 , 曾经 发 生 的 新 低 的 次 数 与 了 有 相同 的 分 布 . 此 外 , 如 果 我 们 记 Wi 为 
第 ;个 新 低 比 它 前 一 个 新 低 小 的 数量 , 容易 看 出 Wi, W2,… 是 独立 同 分 布 的 , 而 且 
也 独立 于 新 低 的 次 数 . 因为 公司 的 资金 在 所 有 时 间 的 (当即 使 它 的 资金 变 成 负 仍 允 
许 公司 保持 运行 时 ) 最 小 值 是 > - 学 并 Wi, 由 此 推出 , 一 个 以 初始 资本 = 开始 的 公 


司 的 破产 概率 是 加 
R(z)= ?位 w > 了 
i=1 


因为 网 
R(z) = Ep"®)+!]=P ,2 Xi> "| 


这 1 

我 们 可 以 将 Wi 识别 为 Xi, 即 我 们 可 以 得 到 结论 : 每 次 新 低 比 它 的 前 一 次 低 一 个 随 
机 的 基 , 它 的 分 布 是 理赔 分 布 的 平衡 分 布 . 
注 ”因为 相继 顾客 的 理赔 之 间 的 时 间 是 均值 为 1/ 和 的 独立 的 指数 随机 变量 , 同时 
保险 公司 以 常数 速率 c 收 到 保险 金 , 所 以 在 相继 的 理赔 之 间 保 险 公司 收 到 的 保险 金 
数额 是 均值 为 c/A 的 独立 的 指数 随机 交 量 . 于 是 , 因为 只 有 当 理赔 额 增加 时 保险 公 
司 才 会 破产 , 所 以 当 在 相继 的 理赔 之 间 收 到 的 保险 金 数额 是 均值 为 c/ 和 的 独立 的 指 
数 随机 变量 , 相继 的 理赔 额 是 具有 分 布 函数 已 的 独立 随机 变量 , 并 且 这 两 个 过 程 独 
立时 , 命题 7.6 中 给 出 的 破产 概率 R(z) 的 表达 式 是 正确 的 . 

现在 考虑 顾客 在 任意 时 间 购 买 保单 的 保险 模型 , 其 中 每 个 顾客 以 每 单位 时 间 常 
数 连 率 c 支付 保险 金 , 到 顾客 索赔 的 时 间 是 速率 为 和 的 指数 随机 变量 , 每 次 理赔 额 
具有 分 布 F. 考虑 相继 的 理赔 之 间 保 险 公司 收 到 的 保险 金 数额 . 特别 地 , 假设 刚刚 
发 生 一 次 理赔 , 令 X 是 下 次 理赔 发 生前 保险 公司 收 到 的 保险 金 数额 注意 , 直至 下 
次 理赔 发 生 , 这 个 数额 是 随时 间 连 续 增长 的 , 假设 从 最 后 一 次 理赔 到 目前 收 到 保险 
金 数额 t. 我 们 要 计算 在 收 到 另外 的 金额 h 前 有 一 次 理赔 的 概率 , 其 中 h 很 小 为 
了 确定 这 个 概率 , 假设 目前 公司 有 人 个 顾客 . 因为 这 大 个 顾客 都 以 速率 c 支付 保险 


金 , 所 以 在 下 次 理赔 发 生前 公司 收 到 的 保险 金 少 于 hh 当 上 且 仅 当 在 下 让 个 时 间 单 位 


内 有 一 次 理赔 . 因为 这 上 个 顾客 都 以 指数 速率 和 索赔, 所 以 直至 有 一 个 顾客 索赔 的 
时 间 是 速率 为 kX 的 指数 随机 交 量 . 记 这 个 随机 变量 为 Bk, 那么 保险 金 增加 额 小 
于 hh 的 概率 是 


P{ 增 加 额 < hlk 个 顾客 } = {Ea < 起 } =1 一 erxh/e = M+ olh) 


直下 入 
P{X<t+hlX>t}= Zh+olh) 


这 表明 X 的 失败 率 函数 恒 等 于 2 但 是 这 意味 着 在 相继 的 理赔 之 间 收 到 的 保险 金 
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数额 是 均值 为 x 的 指数 随机 变量 . 因为 每 次 的 理赔 额 具有 分 布 函数 书 , 所 以 在 这 个 


保险 模型 中 保险 公司 破产 的 概率 恰好 与 前 面 分 析 的 传统 模型 中 的 破产 概率 一 样 . 国 
现在 我 们 给 出 引 理 7.5 的 证 明 . 
引 理 7.5 的 证 明 


令 CO = | te WklWay. 那么 
G(r+h)—G(z)= G(z +h)— [ue +h—yk(y)dy 
0 
+| t(r +h— yk(y)dy— G(r) 


十 用 
=| +-Dkoay+| ee+a-n-te-Dko)dy 


除 以 h 可 得 
Et 十 用 开 一 < 
Ce Glz) _ 引 5 -okouz+[ t(z+h 中 te — Whyyay 
令 h 一 0 可 得 结果 
G'(z) = t(0)k(z) + t(z — yk(y)dy 图 
习 
1 以 下 是 否 正确 


(a) N(t) <n 当 且 仅 当 Sn > 如 
(b) N(t) < n 当 且 仅 当 Sn > t? 
(c) N(t) > n 当 且 仅 当 Sn < 妇 
2. 假设 更 新 过 程 的 到 达 间 隔 分 布 是 均值 为 / 的 泊 松 分 布 . 即 假设 
P{X" =k} = 从， 大 = 0,1… 
(a) 求 Sn 的 分 布 . 
(b) 计算 P{N(t) =n}. 
*3. 以 Sn 记 具 有 到 达 间 隔 分 布 函 数 下 的 更 新 过 程 {N(t),t > 0} 的 第 n 个 事件 时 刻 . 
(a) 问 P{N(t) = 站 Sn = 是 什么 ? 
(b) 从 2 
P{N()) =n}= [ P{N(t) = nlsn = y}fs, (Vdy 


开始 ,利用 n 个 速率 为 和 的 独立 指数 随机 变量 的 和 具有 参数 为 (n, 入 ) 的 伽 马 分 布 ， 当 
F(y) = 1 一 e-Y 时 计算 P{N(t) =n}. 
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4. 


10. 


令 {Ni(t),t > 0} 和 {N2(t),t > 0} 是 独立 的 更 新 过 程 . 令 N(t) = Ni(t) + N2(t). 
(a) {NN(t),t > 0} 的 到 达 间 隔 时 间 是 否 独立 ? 

(b) 它们 是 否 同 分 布 ? 

(c) {N(b),t > 0} 是 否 是 更 新 过 程 ? 


. 令 U1,U2,… 是 独立 的 (0, 1) 均匀 随机 变量 , 定义 N 为 


N=min{n:U+U+.…+Un >1} 


E[N] 是 多 少 ? 
考虑 一 个 具有 一 个 (7, 和) 到 达 间 隔 分 布 的 更 新 过 程 {N(t), t>0}. 即 到 达 和 间隔 密度 是 
j= 0 
(一 1! 
(a) 证 明 ee 
PIN 2n)} = 
(b) 证 明 


日 


其 中 [yn] 是 小 于 或 等 于 i/r 的 最 大 整数 
提示 ， 利 用 F(r, 》) 分 布 与 + 个 速率 为 》 的 独立 指数 随机 变量 的 和 之 间 的 关系 , 用 一 个 束 
率 为 和 的 泊 松 过 程 定义 N(t). 


,史密斯 先生 一 直 在 做 短工 他 的 每 份 工作 平均 可 做 3 个 月 . 如 果 他 在 每 份 工作 前 的 失业 时 


间 是 均值 为 2 的 指数 分 布 , 那么 史密斯 先生 得 到 一 个 新 工作 的 速率 是 什么 ? 


“8. 当 机 器 失效 或 者 已 经 使 用 了 了 年 时 , 就 换 上 一 台新 机 器 . 如 果 相 继 的 机 器 的 寿命 是 独立 的 ， 


具有 一 个 密度 函数 为 f 的 共同 分 布 F, 证 明 
(a) 机 器 被 替换 的 长 程 速率 等 于 


-1 


I zf(z)dz +T(1— F(T)) 
0 


(b) 机 器 失效 的 长 程 速率 等 于 
F(T) 


人 zf(z)dz + TI — F(T)] 


.一 个 工人 连续 地 于 一 些 零 活 . 每 次 完成 一 个 零 活 , 就 开始 一 个 新 的 . 每 个 零 活 独立 地 需要 一 


个 具有 分 布 F 的 随机 时 间 完 成 . 然而 , 独立 于 这 些 按 速率 为 和 的 泊 松 过 程 触 电 发 生 .一 
触电 , 这 个 工人 就 不 再 继续 现在 的 工作 而 开始 一 个 新 的 . 问 零 活 完成 的 长 程 速率 是 多 少 ? 
考虑 一 个 平均 到 达 间 隔 时 间 为 / 的 更 新 过 程 . 假设 这 个 过 程 的 每 一 个 事件 以 概率 p 被 计 
入 . 以 Nc(t) 计 到 时 刻 t(t > 0) 为 止 被 计 入 的 事件 数 . 

(a) {Nc(t),t > 0} 是 更 新 过 程 吗 ? 


(b) im 2 的 是 多 少 ? 
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一个 直至 次 更 新 的 时 间 与 余下 的 到 达 问 陋 时 间 有 不 同 的 分 布 的 更 新 过 各 称 为 延迟 更 新 


12. 


“13. 


14. 


15. 


16. 


17. 


过 程 或 广义 更 新 过 程 . 证 明 命题 7.1 对 延迟 更 新 过 程 仍 然 成 立 ，( 一 般 地 , 若 直至 首次 更 新 
的 时 间 有 有 限 均 值 , 可 以 证 明 更 新 过 程 的 所 有 的 极限 定理 对 延迟 更 新 过 程 仍 然 成 立 .) 
事件 按 速率 为 和 的 泊 松 过 程 发 生 . 在 它 前 面 的 那个 事件 发 生 的 时 刻 d 以 内 发 生 的 事件 , 称 
为 d 事件 . 例如 . 若 d = 1, 而 事件 发 生 在 时 刻 2, 2.8, 4,6,6.6,…, 则 在 时 刻 2.8 与 6.6 发 
生 的 事件 是 d 事件 . , 

(a) d 事件 发 生 的 速率 是 什么 ? 

(b) 所 有 事件 中 d 事件 的 比例 是 多 少 ? 

在 每 局 游戏 中 , 参加 人 等 可 能 地 启 或 输 1 元 . 若 你 使 用 的 策略 是 , 若 首次 赢 则 离开 , 若 首次 
输 则 再 玩 两 局 后 离开 . 以 X 记 你 的 累计 所 得 . 

(a) 用 瓦尔 德 方程 确定 E[X]. 

(b) 计算 X 的 质量 分 布 函 数 , 并 用 它 求 E[X]. 

考虑 赌 徒 破产 问题 , 每 局 他 赢 1 元 的 概率 为 P, 输 1 元 的 概率 为 1 一 P， 赌 徒 继续 玩 直至 他 
的 所 得 为 N 一 i 元 或 -i 元 . (就 是 说 , 赌 徒 以 i 元 开始 , 当 他 的 财富 到 达 0 或 N 时 离开 .) 
以 了 记 财 徒 停 止 前 已 经 进行 的 局 数 . 利用 瓦尔 德 方程 , 结合 已 知 的 财 徒 最 后 所 得 是 N 一 i 
的 概率 求 E[T]. 

提示 : 以 X; 记 财 徒 在 第 j(j > 1) 局 的 所 得 . 芝 7_， X 的 可 能 值 是 什么 ?” E[ 沁 7_， Xj] 是 
什么 ? 

某 矿工 身 陷 井下 陋室 . 室 有 三 门 , 他 选择 门 1 经 过 2 天 的 行进 可 获 自由 ; 选 门 2 则 经 过 4 
天 的 旅程 后 回 到 这 个 房间 ; 选 门 3 经 过 6 天 的 旅程 后 还 是 回 到 这 个 房间 . 假设 在 所 有 的 时 
间 他 都 等 可 能 地 选取 3 个 门 中 的 任意 一 个 , 而 以 T 记 这 个 矿工 获得 自由 所 用 的 时 间 . 

(a) 定义 一 系列 独立 同 分 布 的 随机 变量 Xi, X2,… 和 一 个 停 时 N 使 


N 
Ts 


注 你 可 以 想象 即使 在 到 达 安 全 地 后 这 个 矿工 还 继续 随机 地 在 选取 站 
(b) 用 瓦尔 德 方程 求 ET]. 

( 计算 [ 杞 全，XilN = 串 , 并 且 注意 它 并 不 等 于 EE [ 工 民 ， Xi]. 

(d) 用 (e) 作 BIT] 的 第 二 个 推导 

一 副 52 张 的 扑克 牌 进行 了 尝 牌 , 而 后 每 次 一 张 地 翻转 将 牌 面 朝 上 . 如 果 第 i 张 翻 转 的 牌 是 
一 个 A, 则 令 X 等 于 1 否则 令 它 为 0, i = 1,…,52. 同时 , 以 N 记 使 所 有 的 4 个 A 出 
现 所 需要 翻转 的 牌 的 张 数 , 即 最 后 一 个 A 就 是 第 N 张 被 翻转 的 牌 方程 


E 了 zx = EIN]E[X:] 


是 否 成 立 ? 如 果 不 成 立 , 为 什么 瓦尔 德 方程 不 能 用 ? 

在 例 7.6 中 , 假设 潜在 的 顾客 按 一 个 具有 到 达 间 隔 分 布 下 的 更 新 过 程 来 到 . 直至 时 刻 t 为 
止 的 事件 数 是 否 构成 一 个 更 新 过 程 (可 能 有 延迟 ), 如 果 一 个 事件 对 应 于 一 个 如 下 的 顾客 : 
(a) 进入 银行 的 ? 
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(b) 离开 银行 的 ? 

车 下 是 指数 分 布 , 结论 又 如 何 ? 

当 到 达 间 隔 分 布 下 满足 1 一 F(t) = pe 5 十 (1 一 p)e~*?* 时 , 计算 更 新 函数 . 

对 于 到 达 间 隔 分 布 是 (0, 1) 均匀 分 布 的 更 新 过 程 , 确定 从 t+ = 1 直至 下 一 次 更 新 的 期 户 
时 间 . 

对 于 一 个 更 新 报酬 过 程 , 考虑 


Ws = 有 十 本 十 有 


+ Xt + Xn 
E[R] 


其 中 Wn 表示 在 前 n 个 循环 中 赚 的 平均 报酬. 证 明 当 n 一 co 时 , Wn 一 EX 


考虑 有 一 条 单 服务 线 的 银行 , 顾客 按 速率 为 和 的 泊 松 过 程 到 达 . 如 果 顾 客 到 达 时 只 在 服务 

线 闲 着 时 才 进 入 银行 , 而 且 顾 客 的 服务 时 间 有 分 布 G, 那么 服务 线 忙 的 时 间 比 例 是 多 少 ? 

J 买 车 的 策略 是 : 在 拥有 一 辆 新 车 的 前 T 单位 时 间 修复 所 有 的 故障 , 在 它 的 使 用 寿命 达到 

了 后 发 生 首次 故障 时 送 进 垃圾 场 且 购买 一 辆 新 车 假设 新 车 首次 故障 的 时 间 是 速率 和 的 指 

数 随机 变量 , 而 一 辆 修复 的 故障 车 直至 下 次 故障 的 时 间 是 速率 / 的 指数 随机 变节 

(a) J 买 新 车 的 速率 是 多 少 ? 

(b) 假设 新 车 的 价格 为 C, 而 每 次 修复 的 费用 为 >. J 单位 时 间 的 长 程 平均 花费 是 多 少 ? 

考虑 由 选手 A 和 选手 B 参加 的 发 球 和 对 打 比赛 . 假定 A 开始 发 球 的 每 局 , 选手 A 赢 的 概 

率 为 pa, 选手 B 说 的 概率 为 q = 1 一 pa. 而 假定 在 以 B 开始 发 球 的 每 局 , 选手 A 赢 的 概 

率 为 pp, 选手 B 赢 的 概率 为 9 = 1 一 po. 假设 每 局 的 赢 者 获得 1 个 点 , 且 成 为 下 一 局 的 发 

球 者 . 

(a) 问 在 长 程 中 , A 赢得 点 数 的 比例 是 多 少 ? 

(b) 如 果 发 球 协议 是 选手 交替 发 球 , 就 是 说 , 发 球 协议 是 选手 A 在 第 一 个 点 发 球 , 然后 选手 
B 在 第 二 个 点 发 球 , 而 后 选手 A 在 第 三 个 点 发 球 , 如 此 等 等 . 问 在 长 程 中 , A 说 得 点 数 
的 比例 是 多 少 ? 

(c) 给 出 A 在 启 者 发 球 时 赢得 的 点 数 比 在 交替 发 球 时 赢得 的 点 数 多 的 条 件 . 

瓦尔 德 方程 也 可 以 用 更 新 报酬 过 程 证 明 . 令 N 是 独立 同 分 布 随机 变量 序列 Xi (i > 1) 的 

一 个 停 时 ， 

(a) 令 Ni = NN. 论证 随机 变量 序列 Xwi+l XN4+2,… 与 Xi，…,XN 独立 且 与 原来 的 序 
列 Xi (i > 1) 同 分 布 . 
现在 将 Xi+1,XNi+2,…… 作为 新 的 序列 处 理 , 并 且 正 如 对 于 原来 的 序列 的 Ni, 也 对 
这 个 序列 定义 一 个 停 时 Naz (例如, 如果 Ni = min{n : Xn > 0}, 那么 Na = min{n : 
Xi+n > 0}). 类 似 地 , 正如 对 于 原来 的 序列 的 Ni, 在 序列 XNy+N2+t1, XXNi+N2+2,……… 
上 定义 一 个 停 时 Ns, 如 此 等 等 . 

(b) 在 时 段 i 赚 得 报酬 X; 的 报酬 过 程 是 否 是 更 新 报酬 过 程 ? 如 果 是 , 相继 循环 的 长 度 是 
多 少 ? 

(c) 对 于 单位 时 间 的 平均 报酬 推导 一 个 表达 式 - 

(d) 用 强大 数 定律 推导 单位 时 间 的 平均 报酬 的 第 二 个 表达 式 . 

(e) 推断 瓦尔 德 方程 . 
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27. 


28. 
29. 


.假设 在 例 7.15 中 , 到 达 过 程 是 泊 松 过 程 , 并 且 假 设 使 用 的 策略 是 每 个 t 时 间 单 位 发 出 一 辆 


火车 

(a) 确定 单位 时 间 的 平均 费用 . 

(b) 证 明 在 这 样 定义 的 策略 下 , 单位 时 间 的 最 小 平均 费用 近似 地 是 c/2 加 上 在 这 个 例子 所 
考虑 的 类 型 中 的 最 佳 策略 的 单位 时 间 的 平均 费用 . 

考虑 一 个 火车 站 , 乘客 按 速 率 为 和 的 泊 松 过 程 到 达 . 只 要 有 N 个 乘客 等 候 在 火车 站 ， 一 辆 

火车 就 被 派 来 . 但 是 这 辆 火车 要 用 K 个 单位 时 间 到 达 车 站 . 它 可 承载 所 有 等 候 的 乘客 . 假 

设 若 有 n 个 乘客 , 车 站 收取 单位 时 间 速 率 为 nc 的 费用 , 求 长 程 平均 费用 . 

一 台 机 器 包含 两 个 独立 的 部 件 , 其 中 第 i 个 部 件 运行 一 个 速率 为 Ni 的 指数 时 间 . 只 要 有 一 

个 部 件 正常 运转 , 机 器 就 能 正常 运行 ( 即 当 两 个 部 件 都 失效 时 , 机 器 才 失 效 ). 当 一 台 机 器 失 

效 时 , 一 台 两 个 部 件 都 在 工作 的 新 机 器 投入 使 用 . 只 要 一 台 机 器 发 生 失 效 , 就 导致 一 个 费用 

天 ; 而 且 只 要 在 使 用 的 机 器 有 ii = 1, 2) 个 在 工作 的 部 件 , 就 引起 单位 时 间 速 率 为 ci 的 运 

行 费用 . 求 单位 时 间 的 长 程 平均 费用 . 

在 例 7.17 中 , 生产 的 废品 中 被 发 现 的 比例 是 多 少 ? 

考虑 一 个 单 服务 线 的 排队 系统 , 顾客 按 一 个 更 新 过 程 到 达 . 每 个 顾客 带 来 一 个 随机 数量 的 

工作 量 , 它们 独立 地 按 分 布 G 选取 . 服务 线 每 次 服务 一 个 顾客 . 然而 , 只 要 在 系统 中 有 i 个 

顾客 , 服务 线 就 以 每 单位 时 间 速率 i 处 理工 作 . 例如, 一 个 带 有 工作 是 8 的 顾客 进入 服务 

时 , 若 有 3 个 其 他 顾客 等 待 在 队列 中 且 没有 其 他 人 到 达 , 这 个 顾客 将 使 用 2 个 单位 时 间接 

受 服务 . 如 果 另 一 个 顾客 在 1 个 单位 时 间 后 到 达 , 此 外 没有 其 他 人 到 达 , 那么 我 们 的 顾客 将 

一 共 占 用 1.8 个 单位 时 间接 受 服务 . 

以 Wi 记 顾客 ;在 系统 中 停留 的 时 间 数 量 , 用 


EIW] = lim (Wi 十 十 Wn)/mn 


定义 E[W], 所 以 E[W] 是 顾客 在 系统 中 停留 的 时 间 的 平均 数量 . 以 N 记 在 一 个 忙 期 中 到 
达 的 顾客 数 . 
(a) 论证 
E[W] = E[Wi + :+ Wn]/E[N] 

以 Li 记 顾客 i 带 到 系统 中 的 工作 最 , 所 以 Pi (i > 1) 是 具有 分 布 G 的 独立 随机 变量 . 
(b) 论证 在 任意 时 刻 t， 所 有 早 于 时 刻 t 的 到 达 者 在 系统 中 停留 的 时 间 的 和 ， 等 于 到 时 

刻 上 为 止 处 理 的 工作 总 量 . 

提示 : 考虑 服务 线 处 理工 作 的 速率 . 


(c) 论证 
m= Li 
2 
(d) 用 瓦尔 德 方程 (参见 习题 13) 得 到 结论 
E[W] = 


其 中 k 是 分 布 G 的 均值 . 即 顾客 在 系统 中 停留 的 平均 时 间 等 于 他 们 带 到 系统 中 的 平均 
工作 量 . 
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对 于 一 个 更 新 过 程 , 令 4(t) 是 在 时 刻 t 的 年 龄 . 证 明 若 /< oo, 则 以 概率 1 有 
0 tm 

如 果 A(t) 和 Y(t) 分 别 是 具有 到 达 间 隔 分 布 F 的 更 新 过 程 在 时 刻 上 的 年 龄 和 剩余 寿命 

P{Y(t) > zla(D) 一 

确定 Xwto+i < c 的 时 间 的 长 程 比例 . 

在 例 7.16 中 , 求 服务 线 在 忙 的 时 间 的 长 程 比例 . 

一 个 M/G/oo 排队 系统 在 固定 的 时 刻 T, 27, 3T,… 进行 清理 . 清理 开始 时 , 所 有 在 服务 的 

顾客 都 被 强迫 提早 离开 , 而 且 每 个 顾客 付费 C1. 假设 一 次 清理 要 用 时 间 T/4, 在 清理 期 间 

到 达 的 顾客 将 失去 , 而 且 每 个 顾客 损失 的 费用 为 C2 

(a) 求 单位 时 间 的 长 程 平均 费用 . 

(b) 求 系统 在 清理 的 时 间 的 长 程 比例 . 

人 造 卫 星 按 速率 为 和 的 泊 松 过 程 发 射 , 每 颗 人 造 卫星 独立 地 进入 轨道 , 并 运行 一 个 分 布 为 

下 的 随机 时 间 . 以 X(t) 记 在 时 刻 t 进入 轨道 的 人 造 卫 星 的 颗 数 . 

(a) 确定 P{X(t) = 月. 
提示 : 将 它 与 M/G/ oo 排队 系统 联系 起 来 . 

(b) 如 果 至 少 有 一 颗 人 造 卫 星 在 轨道 运行 , 就 可 以 传输 信息 ,而 我 们 说 这 个 系统 运行 正常 . 
如 果 第 一 颗 人 造 卫 星 在 时 刻 + 二 0 进入 轨道 , 确定 系统 保持 运行 正常 的 期 望 时 间 
提示 : 当 人 一 0 时 , 利用 (a). 

n 个 滑雪 者 每 人 独立 地 连续 向 上 攀登 ， 然 后 从 某 个 特殊 的 斜坡 向 下 滑 . 第 i 个 滑雪 者 用 

来 向 上 网 登 的 时 间 的 分 布 是 及 ,而 且 独 立 于 他 向 下 滑 的 时 间 ， 下 滑 时 间 具 有 分 布 Hi = 

sn 以 N(t) 记 到 时 刻 上 为 止 他 们 滑 下 斜坡 的 总 人 次 . 同时 ,以 U(t) 记 到 时 世上 为止 

登 上 山 的 滑雪 者 的 人 数 . 


(8) lm A 是 多 少 ? 


(b) limt_。 EIU(b] 是 多 少 ? 
(c) 如 果 Fi 都 是 速率 为 和 的 指数 分 布 , 而 G: 都 是 速率 为 / 的 指数 分 布 , P{U(t) = 上} 


是 多 少 ? 
a 3 台 机 器 , 它们 都 是 使 一 个 系统 工作 所 必需 的 . 机 器 i 在 失效 前 运行 一 个 速率 为 Xi 的 指 


38. 


时 间 , i = 1,2,3. 如 果 一 台 机 器 失效 , 系统 就 中 断 运行 , 然后 开始 修理 失效 的 机 器 . 修复 
机 器 1 的 时 间 是 速率 为 5 的 指数 随机 变量 ; 修复 机 器 2 的 时 间 在 (0,4) 上 均匀 分 布 ; 而 修 
复 机 器 3 的 时 间 是 参数 为 n = 3 和 入 = 2 的 伽 马 随机 变量 . 一 旦 一 台 机 器 修复 , 它 就 同 新 
的 机 器 一 样 , 并 且 所 有 的 机 器 都 重新 开始 运行 . 

(a) 系统 在 工作 的 时 间 的 比例 是 多 少 ? 

(b) 机 器 1 在 修理 的 时 间 的 比例 是 多 少 ? 

(©) 机 器 2 在 中 止 情形 ( 即 , 既 不 在 工作 也 不 在 修理 ) 的 时 间 的 比例 是 多 少 ? 

一 个 卡车 司机 行驶 往返 旅程 , 从 A 到 B, 然后 回 到 A. 每 次 他 以 均匀 地 分 布 于 40 与 60 之 
间 的 一 个 固定 的 速度 (每 小 时 英里 ) 从 A 行驶 到 B, 每 次 他 等 可 能 地 以 40 或 60 的 一 个 固 
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定 的 速度 从 B 行驶 到 A. 
(a) 他 花费 在 到 B 的 行驶 时 间 的 长 程 比例 是 多 少 ? 
(b) 他 的 行驶 时 间 中 花费 在 每 小 时 40 英里 的 行驶 时 间 的 长 程 比例 是 多 少 ? 

39。 一 个 系统 由 两 台独 立 的 机 器 组 成 , 每 台 机 器 运行 一 个 速率 为 和 的 指数 时 间 . 只 有 一 个 修理 
工 . 若 一 台 机 器 失效 而 修理 工 正 闲 着 , 则 立刻 修理 这 台 机 器 ; 若 一 台 机 器 失效 而 修理 工 正 忙 
着 , 则 这 台 机 器 必须 等 到 另 一 台 机 器 修复 . 所 有 的 修理 时 间 是 独立 的 ,\ 且 具有 分 布 G, 而 一 
旦 修复 , 机 器 就 同 新 的 一 样 . 问 修 理工 闲 着 的 时 间 的 比例 是 多 少 ? 

40. 3 个 射手 轮流 射击 一 个 目标 . 射手 1 射击 直到 他 未 中 , 然后 射手 2 射击 直到 他 未 中 , 然后 射 
手 3 射击 直到 他 未 中 , 而 后 又 回 到 射手 1, 如 此 等 等 . 每 次 射手 i 以 概率 PR(i = 1,2,3) 击 
中 目标 , 且 独 立 于 过 去 . 确定 每 个 射手 的 射击 时 间 的 长 程 比例 . 

41. 某 台 机 器 每 次 中 断 运行 就 换 上 一 个 同样 类 型 的 机 器 . 问 该 机 器 使 用 时 间 小 于 一 年 的 百分比 
是 多 少 , 如 果 机 器 的 寿命 分 布 是 
(a) 在 (0, 2) 上 的 均匀 分 布 ? 
(b) 均值 为 1 的 指数 分 布 ? 

“42. 对 于 一 个 均值 为 4 的 到 达 间 隔 分 布 F, 我 们 定义 下 的 平衡 分 布 Fe 为 


Flo) = Pey 


(a) 证 明 若 FF 是 指数 分 布 , 则 FF = 到 
(b) 若 对 某 个 常数 c 


0，z<e 

1, z>c 
证 明 Fe 是 (0,c) 上 的 均匀 分 布 . 即 如 果 到 达 间 隔 时 间 恒 等 于 常数 c, 那么 平衡 分 布 是 在 
(0,c) 上 的 均匀 分 布 . 

(c) 加 州 伯克利 市 允许 在 加 州 大 学 一 英里 的 范围 内 , 在 所 有 没有 计价 器 的 地 方 停车 2 小 时 . 

停车 管理 员 规 则 地 到 处 巡视 , 每 2 小 时 经 过 同样 的 地 点 . 每 遇 到 一 辆 车 , 他 就 用 粉笔 作 
一 个 标记 . 如 果 在 2 小 时 后 回来 时 发 现 同一 辆 车 还 在 那里 , 那么 就 开 一 张 停车 罚单 ， 如 
果 你 在 伯克利 停车 , 并 且 在 3 小 时 后 回去 , 问 你 收 到 罚单 的 概率 是 多 少 ? 

43. 考虑 一 个 具有 到 达 间 隔 分 布 F 的 更 新 过 程 , 使 下 式 成 立 : 


Wa Lee -aa 
F(z)= ze 十 5 1 3P>0 


即 到 达 间 隔 分 布 等 可 能 地 是 均值 为 1 的 指数 分 布 或 是 均值 为 2 的 指数 分 布 . 
(a) 不 作 任何 计算 , 猜测 平衡 分 布 F。. 
(b) 验证 你 在 (a) 中 的 猜测 . 
“44. 在 例 7.20 中 , 以 r 记 等 待 到 达 的 公交 车 的 乘客 数 少 于 z 的 比例 . 就 是 说 , 以 Wi 表示 第 i 
个 顾客 的 等 待 时 间 , 我 们 定义 


F(z) = { 


则 T= lm Di Xi/n. 
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45. 


46. 


47. 


48. 


50. 


(a) 令 N 等 于 上 公交 车 的 乘客 数 , 利用 更 新 报酬 过 程 理论 证 明 -2 
(b) 以 了 等 于 两 个 公交 车 的 间隔 时 间 , 确定 E[Xi 十 .… 十 Xwl 一 司 
(0) 证 明 ELX 十 …: 十 Xw] = 和 Elmin(T,z)]. 
(d) 证 明 _ 
P(T > t)dt 


6 
El 

(e) 在 按 T 分 布 的 到 达 间 隔 小 于 z 的 更 新 过 程 中 , Fe(z) 为 超额 寿命 的 比例 ， 利 用 这 点 将 
(qd) 的 结果 和 PASTA 原则 , 即 “ 泊 松 到 达 者 看 到 的 系统 相同 于 关于 时 间 平 均 的 系统 ”， 
联系 起 来 . 

考虑 一 个 能 处 在 状态 1、 2 或 3 的 系统 . 每 次 系统 进入 状态 i 时 , 它 在 那里 保持 一 个 均值 yx; 

的 随机 时 间 , 然后 以 概率 Pi 转移 到 状态 j. 假设 


1 
Pa=l Pi=Pa=5, Pu=1 


(a) 系统 转移 到 状态 1 的 比例 是 多 少 ? 
(b) 如 果 jn = 1,p2 = 2, 3 = 3, 那么 系统 处 在 每 个 状态 的 时 间 的 比例 是 多 少 ? 

考虑 一 个 半 马 尔 可 夫 过 程 , 在 转移 到 不 同 的 状态 以 前 , 过 程 停留 在 每 个 状态 上 的 时 间 是 指 
数 随机 变量 , 这 是 什么 类 型 的 过 程 ? 

在 半 马 尔 可 夫 过 程 中 , 以 tij 记 给 定 下 一 个 状态 是 j 时 过 程 在 状态 i 停留 的 条 件 期 望 时 间 . 
(a) 提出 一 个 联系 jvi 与 tij 的 方程. 

(b) 证 明 过 程 在 i 而 下 一 次 进入 j 时 间 的 比例 等 于 


提示 : 每 次 进入 状态 i, 就 说 一 个 循环 开始 . a i 且 前 往 j 时 , 想象 你 以 每 单位 时 
间 1 的 速率 接受 报酬 . 单位 时 间 的 平均 报酬 是 多 少 ? 

某 出 租车 往来 于 3 个 地 点 . 在 地 点 i 需要 停 一 个 均值 为 ti 的 随机 时 间 , i = 1,2,3. 在 地 
点 上 车 的 乘客 将 以 概率 PP; 去 地 点 j. 从 i 到 j 的 旅行 时 间 是 以 mi; 为 均值 的 随机 变 
量 . 假设 ti =1,t2=2,ts3=4, Pi = 1 Pa = 1 Pi=2/3=1- Pm = 10,mz = 
20, mal = 15, ma2 = 25. 定义 一 个 合适 的 半 马 尔 可 夫 过 程 , 并 确定 

(a) 出 租车 司机 在 地 点 i 等 候 的 时 间 的 比例 . 

(b) 出 租车 司机 在 从 i 到 j 的 路 上 的 时 间 的 比例 i,j = 1,2, 3. 


= F(z) 


T= 


Mu, 


. 考虑 一 个 有 T(n, 入 ) 到 达 间隔 分 布 的 更 新 过 程 , 而 以 Y(t) 记 从 t 到 下 一 次 更 新 发 生 的 时 


间 . 利用 半 马 尔 可 夫 过 程 理论 证 明 
Jim P{Y(D < z} = 加 > Gia(z) 


其 中 Gi,(z) 是 (i, 和) 分 布 函数 . 
为 了 证 明 方程 (7.24), 定义 下 面 的 记号 : 


XX? 三 在 第 7 次 访问 状态 i 时, 在 这 个 状态 的 停留 时 间 
Ni(m) = 在 前 m 次 转移 中 访问 状态 i 的 次 数 
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51. 


“52. 


“53. 


54. 


55. 


56. 


57. 


用 这 些 记号 写 出 以 下 的 表达 式 ， 
(a) 在 前 mn 次 转移 期 间 过 程 在 状态 i 的 时 间 数 二 
(b) 在 前 mn 次 转移 期 间 过 程 在 状态 i 的 时 间 的 比例 . 
论证 以 概率 1 有 
(0 开光 mA hh, Bm ao0 
5 Mm) ; 
(0) ME sn, m0. 


(e) 将 (aj、(b)、(c) 和 (d) 结合 起 来 证 明 方程 (7.24). 

1984 年 , 摩 洛 一 国 在 试图 确定 游客 在 一 次 访问 中 停留 在 这 个 国家 的 时 间 的 平均 量 时 , 试用 
了 两 种 不 同 的 抽样 方法 .一 种 是 在 游客 离开 这 个 国家 时 , 随机 地 选取 询问 ; 另 一 种 , 对 于 在 
旅馆 中 的 游客 , 随机 地 选取 询问 . (每 个 游客 待 在 一 个 旅馆 .) 从 旅馆 随机 选取 的 3000 个 旅 
客 的 平均 访问 时 间 是 17.8, 而 从 12 321 个 离开 的 旅客 中 询问 旅客 的 平均 访问 时 间 是 9.0. 
你 能 解释 这 个 偏差 吗 ? 它 一 定 有 错误 吗 ? 

在 例 7.20 中 , 证 明 若 是 速率 /的 指数 分 布 , 则 

等 待 的 平均 数 = E[N] 

即 当 公交 车 按 泊 松 过 程 到 达 时 , 在 车 站 等 待 的 平均 人 数 关于 所 有 时 间 的 平均 , 等 于 当 一 辆 公 
交 车 到 达 时 等 待 的 平均 乘客 数 . 这 看 起 来 似乎 违反 直觉 的 , 因为 一 辆 公交 车 到 达 时 , 等 待 的 
平均 乘客 数 至 少 和 在 该 循环 中 任意 时 刻 的 等 待 乘 客 数 一 样 多 . 

(b) 用 一 种 检验 迟 论 类 型 的 想法 解释 为 何 这 样 的 结果 是 可 能 的 . 

(c) 解释 这 样 的 结果 如 何 从 PASTA 原则 推出 . 

一 枚 硬币 被 抛 搓 时 正面 向 上 的 概率 为 p, 连续 抛 挪 它 , 求 直 到 出 现 序列 “ 正 、 反 、 正 、 反 、 
正 、 反 、 正 ” 时 的 期 望 抛掷 次 数 . 

令 Xi(i > 1) 是 独立 随机 变量 ,具有 p; = P{Xi = 四,j > 1. 如 果 p; = j/10,7 = 1,2,3,4， 
求 观察 到 模式 1, 2, 3, 1, 2 出 现时 需要 的 随机 变量 个 数 的 期 肩 时 间 和 方差 

一 枚 以 概率 0.6 正面 向 上 的 硬币 连续 地 被 抛掷 . 求 直 到 出 现 序 列 “ 反 、 正 、 正 、 反 ”或 者 出 
现 序列 “ 反 、 反 、 反 ”时 的 期 望 抛掷 次 数 , 并 且 求 “ 反 、 反 、 反 ” 先 出 现 的 概率 . 

等 可 能 地 是 数字 0 到 9 的 任意 一 个 随机 数字 , 按 顺序 被 观测 

(a) 求 直至 10 个 不 同 值 的 一 个 连贯 出 现 的 期 望 时 间 - 

(b) 求 直至 5 个 不 同 值 的 一 个 连贯 出 现 的 期 望 时 间 . 

令 hz)=P{ 王 ZX > z}, 其 中 Xi, Xz，,… 是 具有 分 布 函数 Fi 的 独立 随机 变 贡 , 而 了 独 
立 于 Xi, 并 且 有 概率 质量 函数 P{ 了 =n} = 二 p"(1 一 p),n 之 0. 证 明 h(z) 满足 方程 (7.53). 
提示 : 由 对 是 否 了 = 0 或 了 > 0 取 条 件 开始 . 


参考 文献 
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第 8 章 排队 理论 


8.1 引 言 


在 本 章 , 我 们 研究 一 类 顾客 以 某 种 随机 方式 到 达 一 个 服务 设施 的 模型 . 顾客 到 
达 之 后 , 站 在 队列 中 等 候 , 直到 轮 到 他 们 接受 服务 . 一 旦 接受 了 服务 , 通常 就 假定 他 
们 离开 了 系统 . 对 于 这 样 的 模型 , 我 们 对 一 些 甚 感 兴趣 , 诸如 在 系统 (或 在 队列 ) 中 
的 顾客 的 平均 数 和 一 个 顾客 在 系统 (或 在 队列 ) 中 等 待 的 平均 时 间 . 

在 8.2 节 中 , 我 们 推导 一 系列 基本 的 排队 恒等式 , 它们 在 分 析 排队 模型 时 是 非 
常 有 用 的 . 我 们 还 介绍 3 组 不 同 的 极限 概率 , 它们 分 别 对 应 于 到 达 者 所 看 到 的 、 离 
开 者 所 看 到 的 和 外 面 的 观察 者 所 看 到 的 . 

在 8.3 节 中 , 我 们 处 理 概率 分 布 都 假定 为 指数 分 布 的 排队 系统 . 例如 , 最 简单 的 
这 类 模型 是 假定 顾客 按 泊 松 过 程 到 达 (因此 到 达 间 隔 时 间 都 是 指数 分 布 ), 而 且 由 单 
个 服务 线 每 次 一 个 地 服务 , 每 次 服务 的 时 间 长 度 是 一 个 指数 分 布 . 这 些 指数 排队 模 
型 是 连续 时 间 马 尔 可 夫 链 的 特殊 情形 , 并 且 可 以 像 第 6 章 那样 地 分 析 . 然而 , 以 ( 非 
常 ) 少 的 重复 为 代价 , 我 们 假定 你 并 不 熟悉 第 6 章 中 的 内 容 , 且 我 们 更 愿意 重新 展 
开 我 们 所 需 的 任何 材料 . 特别 地 , 我 们 将 重新 推导 (用 直观 的 论证 ) 极限 概率 的 公式 . 

在 8.4 节 中 , 我 们 考虑 顾客 在 一 个 服务 网 中 随机 移动 的 模型 . 8.4.1 节 的 模型 是 
一 个 开放 系统 , 允许 顾客 进入 和 离开 系统 , 而 在 8.4.2 节 中 的 模型 在 系统 中 顾客 的 集 
合 关于 时 间 为 常量 的 意义 下 是 封闭 的 . 

在 8.5 节 中 , 我 们 研究 M/G/1 模型 , 这 里 假定 泊 松 到 达 , 允许 服务 分 布 是 任意 
的 . 为 了 分 析 这 个 模型 , 我 们 首先 在 8.5.1 节 中 引入 功 的 概念 , 然后 在 8.5.2 节 中 利用 
这 个 概念 帮助 分 析 这 个 系统 . 在 8.5.3 节 中 我 们 推导 了 一 条 服务 线 在 两 个 闲 期 之 间 
保持 忙 的 平均 时 间 基 . 

在 8.6 节 中 , 我 们 考虑 M/G/1 模型 的 某 些 变形 . 特别 地 , 在 8.6.1 节 中 假设 承载 
顾客 的 公共 汽车 按 泊 松 过 程 到 达 , 且 每 辆 公共 汽车 载 有 随机 个 数 的 顾客 . 在 8.6.2 节 
中 我 们 假设 有 两 类 不 同 的 顾客 一 一 类 型 1 顾客 要 比 类 型 2 顾客 优先 接受 服务 . 

在 8.6.3 节 中 我 们 介绍 一 个 M/G/1 优化 例子 . 假设 只 要 服务 线 闲 着 , 服务 线 就 
中 断 , 然后 假定 一 个 价格 , 决定 一 个 最 佳 时间 使 它 重 返 服务 . 

在 8.7 节 中 , 考虑 一 个 具有 指数 服务 时 间 , 但 是 顾客 到 达 的 间隔 时 间 人 允许 为 任 
意 分 布 的 模型 . 通过 利用 一 个 适当 定义 的 马尔 可 夫 链 来 分 析 这 个 模型 . 对 于 这 个 模 
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型 , 我 们 也 推导 出 一 个 忙 期 和 一 个 闲 期 的 平均 长 度 . 

在 8.8 节 中 , 我 们 考虑 一 个 单 服务 系统 , 它 的 到 达 过 程 来 自 有 限 个 可 能 源 的 回 
访 . 给 定 了 一 个 一 般 的 服务 分 布 , 我 们 证 明 如 何 用 一 个 马尔 可 夫 链 来 分 析 这 个 系统 . 

在 最 后 一 节 中 , 我 们 论 及 多 服务 线 系统 . 我 们 从 损失 系统 开始 , 这 里 假定 顾客 
在 发 现 所 有 的 服务 线 都 忙 时 , 就 离开 , 这 样 系统 就 失去 了 他 们 . 这 导致 了 著名 的 厄 兰 
损失 公式 .在 这 个 模型 中 , 当 到 达 过 程 是 泊 松 过 程 而 且 具 有 一 般 的 服务 分 布 时 , 在 
忙 的 服务 线 的 个 数 的 一 个 简单 的 公式 . 然后 我 们 讨论 允许 排队 的 多 服务 线 系统 . 然 
而 , 除了 假定 指数 服务 时 间 外 , 这 些 模型 很 少 有 明确 的 公式 . 在 本 章 末 , 我 们 对 于 泊 
松 到 达 的 服务 线 模型 队列 中 的 一 个 顾客 的 平均 等 待 时 间 给 出 了 一 个 近似 . 


8.2 预备 知识 


这 一 节 将 推导 一 些 恒等式 , 它们 在 绝 大 多 数 排队 模型 中 都 是 有 用 的 . 
8.2.1 价格 方程 


排队 模型 中 一 些 重要 的 基本 基 是 ; 
工 ， 系统 中 平均 顾客 数 ; 
Lea， 队列 中 平均 等 待 顾客 数 ; 
W， 一 个 顾客 在 系统 中 所 耗 的 平均 时 间 ; 
Wa， 一 个 顾客 在 队列 中 等 待 的 平均 时 间 . 
关于 其 他 重要 的 其 与 上 述 基 之 间 大 基 重 要 且 有 用 的 关系 , 可 以 利用 下 面 的 想法 
得 到 : 强制 进入 系统 的 顾客 为 该 系统 付 钱 ( 按 某 些 规则 ). 于 是 我 们 有 下 面 的 基本 价 
格 恒等式 : 
系统 赚钱 的 平均 速率 = Aa。x 进入 系统 的 顾客 所 付 的 平均 金额 。 “(8.1) 
其 中 Xe 定义 为 进入 系统 的 顾客 的 平均 到 达 速率 . 即 如 果 以 N(t) 记 截至 时 刻 t 到 达 
的 顾客 数 , 那么 
N(t) 
t 


， 有 


现在 我 们 介绍 式 (8.1) 的 一 个 直观 证 明 . 
式 (8.1) 的 直观 证 明 令 人 了 是 一 个 很 大 的 固定 数 . 我 们 用 两 种 不 同 的 方法 , 计算 截 
止 到 时 间 了 系统 赚 到 的 平均 金额. 一 方面 , 这 个 其 近似 地 可 以 由 系统 赚钱 的 平均 速 
率 乘 以 时 间 了 的 长 度 得 到 . 另 一 方面 , 我 们 可 以 用 进入 系统 的 顾客 平均 支付 的 金额 
乘 以 到 时 间 了 进入 系统 的 平均 顾客 数 近似 计算 (上 且 后 一 个 因子 近似 等 于 和 A。T). 因 
此 , 式 (8.1) 的 两 边 同 乘 以 了 时 近似 地 等 于 截止 时 间 T 系统 赚 到 的 平均 金额 . 于 是 
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令 了 一 co, 即 得 结论 . 9 
通过 选取 合适 的 价格 规则 , 很 多 有 用 的 公式 可 以 作为 方程 (8.1) 的 特殊 情形 而 
得 到 . 例如 , 假设 每 个 顾客 在 系统 期 间 每 单位 时 间 付 1 美元 , 则 方程 (8.1) 导致 所 谓 
的 利 特 尔 
工 = Xu 本 (8.2) 
这 是 因为 在 这 样 的 价格 规则 下 ， 系统 赚钱 的 速率 正好 是 在 系统 中 的 人 数 ， 而 一 个 顾 
客 所 付 的 钱 数 正好 等 于 他 在 系统 中 的 时 间 . 
类 似 地 , 如 果 我 们 假设 每 个 在 队列 中 的 顾客 , 每 单位 时 间 付 1 美元 , 方程 (8.1) 
导致 
Lo = MWo (8.3) 
假设 价格 规则 为 每 个 顾客 在 接受 服务 期 间 , 每 单位 时 间 付 1 美元 , 我 们 由 方程 (8.1) 
得 到 
接受 服务 的 顾客 平均 数 = XeE[S] (8.4) 
其 中 E[S] 定义 为 一 个 顾客 用 来 接受 服务 的 平均 时 间 . 
应 该 强调 的 是 , 不 管 如 何 规定 到 达 过 程 、 服 务 线 或 队列 的 个 数 , 方程 (8.1)~ 方 
程 (8.4) 对 于 几乎 所 有 的 排队 模型 都 成 立 . a 


8.2.2 稳 态 概率 
以 X(t) 记 时 刻 t 系统 中 的 顾客 数 , 并 且 由 
及 = Jlim P{X(t) = 


定义 已 ,mn > 0, 这 里 我 们 假定 上 面 的 极限 存在 . 换 句 话说 , Ps 是 在 系统 中 恰 有 个 
顾客 的 极限 或 长 程 概率 . 有 时 它 指 在 系统 中 恰 有 n 个 顾客 的 稳 态 概率 . 通常 也 证 实 
已 等 于 系统 恰好 包含 n 个 顾客 的 时 间 的 (长 程 ) 比例 . 例如 , 如 果 Po = 0.3, 那么 在 
长 程 中 系统 将 有 30% 的 时 间 没 有 顾客 . 类 似 地 , 如 果 PP = 0.2, 那么 在 长 程 中 系统 
有 20% 的 时 间 只 有 一 个 顾客 . 9 

另外 两 组 极限 概率 是 {an,n > 0} 和 {dn,n > 0}, 其 中 

an = 发 现 系 统 中 有 个 人 的 到 达 顾 客 的 比例 
= 看 到 系统 中 还 有 n 个 人 的 顾客 的 离开 者 的 比例 

也 就 是 说 , P, 是 系统 中 有 个 人 的 时 间 比 例 ; an 是 看 到 n 个 人 的 到 达 者 的 比例 ; dn 
是 离开 系统 时 留 下 n 个 人 的 离开 者 的 比例 . 这 些 其 不 一 定 总 相等 , 这 可 由 下 述 例子 
说 明 这 一 点 . 

@ 着 假定 排队 过 程 是 在 7.5 节 的 意义 下 再 生 的 , 我 们 可 以 给 出 一 个 严格 的 证 明 . 多 数 模型 ,包含 


本 章 中 所 有 的 模型 , 都 满足 这 个 条 件 . 
@ Pn 的 对 偶 解释 的 有 效 性 的 一 个 充分 条 件 是 , 排队 过 程 是 再 生 的 . 
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例 8.1 考虑 一 个 排队 模型 , 其 中 每 个 顾客 的 服务 时 间 都 是 1, 而 相继 到 达 的 两 个 
顾客 之 间 的 间隔 时 间 总 大 于 1( 例 如 , 到 达 间 隔 时 间 可 以 是 (1,2) 上 的 均匀 分 布 ). 因 
此 , 当 每 个 到 达 者 发 现 系统 是 空 的 和 每 个 离开 者 离开 时 系统 是 空 的 时 候 , 我 们 有 
ao=do=1 
然而 
西关 1 
因为 系统 并 不 总 是 没有 顾客 的 . 
然而 , 在 上 述 例子 中 on = dn 并 不 是 偶然 的 . 正如 在 下 面 命题 中 所 看 到 的 ， 人 
者 和 离开 者 总 是 看 到 同样 的 顾客 数 , 这 往往 是 正确 的 . 
命题 8.1 ”在 每 次 到 达 1 位 顾客 , 并 且 每 次 离开 1 人 的 任意 系统 中 ， 
发 现 n 人 的 到 达 者 速率 二 留 下 n 人 的 离开 者 速率 
而 且 
an=dn 
证 明 只 要 系统 中 的 人 数 从 n 增加 到 m + 1, 到 达 者 就 能 看 到 系统 中 有 m 个 人 ; 类 
似 地 , 只 要 系统 中 的 人 数 从 n+ 1 减少 到 n, 离开 者 离开 时 系统 中 就 留 有 m 个 人 . 现 
在 , 在 任意 时 间 段 了 内 从 n 到 n+1 的 转移 次 数 一 定 等 于 在 时 间 了 内 从 +1 到 m 
的 转移 次 数 (任意 两 次 从 n 到 n+ 1 的 转移 之 间 一 定 有 一 次 从 n 十 1 到 n 的 转移 
反之 亦 然 ). 因此 , 从 nn 到 n+1 的 转移 速率 等 于 从 n+1 到 nn 的 转移 速率 ; 或 者 , 等 
价 地 , 发 现 n 人 的 到 达 者 速率 等 于 留 下 n 人 的 离开 者 速率 . 现在 , 看 到 n 个 人 的 到 
达 者 的 比例 on 可 以 表示 为 
二 看 到 个 人 的 到 达 者 速率 
总 到 达 速率 
类 似 地 ， 
4 二 留 下 n 个 人 的 离开 者 速率 
总 离开 速率 
于 是 , 如 果 总 的 到 达 速 率 等 于 总 的 离开 速率 , 那么 上 面 证 明了 an = dn. 另 一 方面 ， 
如 果 全 面 的 到 达 率 超过 全 面 的 离开 率 , 那么 队列 的 长 度 将 趋 于 无 穷 , 于 是 an = ds 
= 0. a 
因此 , 平均 地 , 到 达 者 和 离开 者 总 是 看 到 相同 人 数 的 顾客 . 然而 , 正如 例 8.1 所 
描述 的 , 他 们 一 般 看 不 到 (顾客 数 的 ) 时 间 平 均 . 一 个 重要 的 例外 是 , 在 泊 松 到 达 的 
情形 , 他 们 能 够 看 到 (顾客 数 的 ) 时 间 平 均 . 
命题 8.2 ” 泊 松 到 达 者 总 能 看 到 (顾客 数 的 ) 时 间 平 均 . 特别 地 , 对 于 泊 松 到 达 者 有 
已 = an 
为 了 理解 为 什么 泊 松 到 达 者 总 能 看 到 (顾客 数 的 ) 时 间 平 均 , 考虑 任意 的 一 个 
泊 松 到 达 者 . 如 果 我 们 知道 他 在 时 刻 t 到 达 , 那么 , 在 到 达 时 他 所 看 到 状态 的 条 件 


8.2 预备 知识 405 


分 布 与 在 时 刻 上 系统 状态 的 无 条 件 分 布 是 一 样 的 . 因为 知道 在 时 刻 t 有 一 个 顾客 到 
达 , 并 没有 给 我 们 提供 在 时 刻 t 以 前 发 生 了 什么 的 任何 信息 (因为 泊 松 过 程 具有 独 
立 增 量 , 知道 一 个 事件 在 时 刻 t 发 生 并 不 影响 发 生 在 时 刻 t 之 前 的 分 布 )， 因此 , 一 
个 到 达 者 正 是 按 极限 概率 看 到 这 个 系统 的 . 

将 上 述 情况 与 例 8.1 的 情况 作对 比 , 在 例 8.1 中 , 知道 一 位 顾客 在 时 刻 t 到 达 ， 
可 以 告诉 我 们 很 多 过 去 的 情况 ; 特别 地 , 它 告诉 我 们 在 (t 一 1,t) 去 间 没 有 顾客 到 达 . 
于 是 在 这 种 情况 下 , 我 们 不 能 得 到 在 时 刻 t 到 达 的 顾客 所 看 到 的 分 布 与 在 时 刻 t 系 
统 状态 的 分 布 一 样 的 结论 . 

对 泊 松 到 达 者 能 看 到 (顾客 数 的 ) 时 间 平均 的 第 二 个 理由 是 , 我 们 注意 到 直至 
时 刻 了 为 止 系 统 在 状态 n 的 总 时 间 (粗略 地 ) 是 PT. 因此 , 鉴于 不 论 系统 的 状态 
如 何 , 一 个 泊 松 到 达 者 总 按 速率 A 到 达 , 由 此 推出 在 [0,T] 中 到 达 并 发 现 系 统 处 于 
状态 n 的 人 数 (粗略 地 ) 是 PsT. 所 以 , 从 长 远 来 看 , 到 达 者 看 到 系统 处 于 状态 ne 
的 速率 是 AP,, 而 且 又 因为 A 是 总 到 达 速 率 , 由 此 推出 AP,/A = P 是 到 达 者 看 到 
系统 处 于 状态 n 的 比例 . 

泊 松 到 达 者 看 到 时 间 平 均 的 结果 , 称 为 PASTA(Possion Arrivals See Time Ave- 

rage) 原则 . 
例 8.2 乘客 按 速 率 和 的 泊 松 过 程 到 达 一 个 公交 车 站 . 公交 车 按 速率 / 的 泊 松 过 
程 到 达 此 车 站 , 每 辆 到 达 的 车 送 走 所 有 等 待 的 乘客 . 将 在 车 站 各 人 的 平均 等 车 时 间 
记 为 We. 因为 每 个 人 的 等 待 时间 等 于 从 他 们 到 达 时 刻 直 至 下 一 辆 公交 车 到 达 的 时 
刻 , 所 以 等 待 时 间 是 速率 为 上 的 指数 随机 变量 , 于 是 我 们 可 知 


We=1/p 
利用 Le = 和 aWe, 就 证 明了 在 车 站 的 平均 等 待人 数 关于 一 切 时 间 的 平均 Le 是 
Lo=Mp 


如 果 我 们 将 第 i 辆 车 载 走 的 人 数 记 为 Xi, 那么 对 第 i 一 1 辆 和 第 i 辆 到 达 的 公交 车 
之 间 的 时 间 有 


E[XiT] = MT 
这 个 事实 来 自 , 因为 在 任意 时 间 区 间 中 到 达 车 站 的 人 数 是 泊 松 分 布 , 其 均值 等 于 区 
间 长 度 的 和 倍 . 又 因为 7; 是 速率 为 4 的 指数 随机 变量 , 由 上 式 两 边 取 期 望 推出 
ELX = XE[T:] = MA 
于 是 , 每 辆 车 载 走 的 人 数 等 于 等 待 一 辆 公交 车 的 人 的 时 间 平 均 , 这 是 PASTA 原则 


的 一 个 例证 . 就 是 说 , 因为 公交 车 按 泊 松 过 程 到 达 , 由 PASTA 原则 推出 , 从 到 达 的 
公交 车 看 到 的 等 待人 数 取 平均 和 对 时 间 取 平均 得 出 的 等 待人 数 是 相同 的 . 
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8.3 指数 模型 


8.3.1 单条 服务 线 的 指数 排队 系统 


假设 顾客 按照 速率 为 和 的 泊 松 过 程 到 达 一 个 单 服务 线 的 服务 站 . 也 就 是 说 , 相 
继 到 达 者 之 间 的 时 间 是 独立 的 具有 均值 1/ 的 指数 分 布 . 在 每 个 顾客 到 达 时 , 如 果 
服务 线 闲 着 , 就 直接 进入 服务 , 否则 顾客 就 加 入 队列 . 当 服务 线 完成 一 个 顾客 的 服 
务 , 这 个 顾客 就 离开 系统 , 而 队列 中 的 下 一 个 顾客 (如 果 有 ) 进入 服务 , 相继 的 服务 
时 间 假 定 是 独立 的 具有 均值 1/4 的 指数 分 布 . 

上 面 的 系统 称 为 M/M/1 排队 系统 . 两 个 “M"” 指 的 是 到 达 间 隔 和 服务 分 布 两 
者 都 是 指数 分 布 的 ( 且 因 此 无 记忆 , 或 马尔 可 夫 性 ) 的 事实 , 而 “1” 指 单条 服务 线 . 
为 了 分 析 这 个 系统 , 我 们 先 来 确定 它 的 极限 概率 已, 对 n = 0,1,…. 为 此 , 我 们 的 
思路 如 下 . 假设 我 们 有 无 穷 多 个 房间 , 标号 为 0, 1, …, 并 且 假 设 只 要 在 系统 中 有 nn 
个 顾客 , 我 们 就 指示 某 人 进入 房间 n. 也 就 是 说 , 只 要 在 系统 中 有 2 个 顾客 , 他 将 进 
入 房间 2; 而 若 另 一 人 正 要 到 达 , 则 他 离开 房间 2 进入 房间 3. 类 似 地 , 若 一 个 服务 
已 经 结束 , 则 他 将 离开 房间 2 进入 房间 1( 因 为 现在 系统 中 只 有 一 个 顾客 ). 

现在 假设 在 长 程 中 , 我 们 的 个 体 以 每 小 时 10 次 的 速率 进入 房间 1. 那么 , 他 必 
须 以 什么 速率 离开 房间 1 呢 ? 显然 , 同样 也 以 每 小 时 10 次 的 速率 离开 房间 1. 因为 
他 进入 房间 1 的 总 次 数 必须 等 于 (或 者 多 一 次 ) 他 离开 房间 1 的 总 次 数 . 于 是 这 种 
推理 产生 了 使 我 们 确定 状态 概率 的 一 般 原则 . 即 对 每 个 n > 0, 过 程 进 入 状态 n 的 
壕 率 等 于 它 离开 状态 n 的 速率 . 现在 让 我 们 确定 这 些 速率 . 首先 考虑 状态 0. 当 在 
状态 0 时 , 过 程 只 能 有 一 个 到 达 者 离开 , 因为 很 显然 当 系统 是 空 的 时 候 不 可 能 会 有 
人 离开 . 由 于 到 达 速 率 是 X, 而 过 程 在 状态 0 的 时 间 比 例 是 丽 , 由 此 推出 过 程 离开 
状态 0 的 速率 是 Po. 另 一 方面 , 状态 0 只 能 由 状态 1 经 过 一 个 离开 达到 . 也 就 是 
说 , 如 果 在 系统 中 只 有 一 个 顾客 , 而 且 完成 了 服务 , 那么 系统 就 变 成 空 的 了 . 由 于 服 
务 速率 是 / 且 系 统 中 恰 有 1 个 顾客 的 时 间 比 例 是 瑟 , 由 此 推出 过 程 进入 状态 0 的 
速率 是 JPi. 

因此 ， 由 速率 相等 原理 ， 我 们 得 到 第 一 个 方程 

AP = pP 

现在 考虑 状态 1. 过 程 可 以 离开 这 个 状态 , 或 者 通过 一 个 到 达 ( 它 发 生 的 速率 是 入 )， 
或 者 通过 一 个 离开 ( 它 发 生 的 速率 是 /), 因此 过 程 将 以 速率 + 人 离开 这 个 状态 9 . 

@ 如 果 一 个 事件 以 速率 和 发 生 , 而 另 一 个 事件 以 速率 / 发 生 , 那么 , 两 者 中 任 一 个 事件 发 生 的 速率 


是 和 十 4. 假设 一 个 人 每 小 时 赚 2 美元 , 而 另 一 个 人 每 小 时 赚 3 美元 , 那么 , 显然 他 们 合 起 来 每 
小 时 赚 5 美元 
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由 于 过 程 在 状态 1 的 时 间 比 例 是 号 , 所 以 过 程 离开 状态 1 的 速率 是 (和 + 儿 )P. 另 
一 方面 , 状态 1 可 能 由 状态 0 经 过 一 个 到 达 进 入 , 也 可 能 由 状态 2 经 过 一 个 离开 进 
入 . 因此 , 过 程 进入 状态 1 的 速率 是 和 Po + Jj 忆 . 因为 对 于 其 他 状态 的 理由 是 类 似 
的 , 于 是 我 们 得 到 下 列 一 组 方程 : 


状态 过 程 离开 的 速率 = 进入 的 速率 
0 和 AP = pP 
nn2l Q+W)Ps = APa_1 + hPa (8.5) 
方程 组 (8.5) 称 作 平 衡 方 程 组 , 它 平衡 了 过 程 进 入 一 个 状态 的 速率 与 离开 这 个 状态 
的 速率 . 
为 了 求解 方程 组 (8.5), 我 们 将 它们 改写 为 
只 = 2 
Bn=2P,+ (PAP1), n>1 
按照 PB 求解 , 得 到 
P=P,, 
P= A 
a 
和 从 入 RY” 
PB=2P+ (a | 2m) 写生 (2) h,, 
入 2 
P= 一 有 严 十 (a 3) = pr = 人 Ph, 
入 和 上 和 \ 
-人 


入 入 入 
Ron = BPa+t (Ps -2Pp,) = 2P,= 
条 及 


| 
| 
er 
Fl> 
Nw 
提 
了 
S 


为 了 确定 局, 我 们 利用 及 的 和 必须 是 1 这 个 事实 , 因此 
i 
1 () nr 


因此 


(8.6) 
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注意 为 了 上 面 的 方程 有 意义 , 和 /4 必须 小 于 1. 否则 于 六 o (MA) ”将 是 无 穷 , 且 所 有 
的 已, 将 都 是 0. 因此 , 我 们 将 假定 MA < 1. 注意 到 , 直观 地 如 果 和 > /那么 将 不 存 
在 极限 概率 . 这 是 因为 假设 和 > 人 . 由 于 顾客 按 泊 松 速率 和 到 达 , 由 此 推出 到 时 刻 t 
为 止 期 望 的 总 到 达 数 是 At. 另 一 方面 , 到 时 刻 t 为 止 服务 过 的 顾客 的 期 望 值 是 多 少 
呢 ? 如 果 总 有 顾客 出 现 , 那么 服务 过 的 顾客 数 将 是 一 个 速率 为 1 的 泊 松 过 程 , 因为 
相继 服务 之 间 的 时 间 将 是 具有 均值 1/4 的 独立 指数 随机 变量 . 因此 , 到 时 刻 t 为 止 
服务 过 的 顾客 的 期 望 不 大 于 pt; 所 以 , 在 时 刻 t 系统 中 的 期 望 数 至 少 是 
At 一 太一 (入 一 由 


现在 如 果 和 > 心 那么 , 当 t 变 大 时 , 上 面 的 数 趋 于 无 穷 . 也 就 是 说 , 当 和 /1 > 1 时 ， 
队列 长 度 无 极限 地 增长 且 没 有 极限 概率 . 再 注意 到 条 件 MA < 1 等 价 于 平均 服务 时 
间 小 于 相继 到 达 之 间 的 平均 时 间 的 条 件 ， 这 是 在 大 多 数 的 单 服务 线 排队 系统 中 为 
了 极限 概率 存在 所 必须 满足 的 一 般 条 件 . 
注 (i) 对 于 M/M/1 排队 系统 , 在 求解 平衡 方程 组 时 ， 作 为 中 间 步 又 我 们 得 到 方 
i APn = pPnti, n>0 
这 些 方程 可 以 由 一 般 排 队 结 果 直 接 推 得 (如 命题 8.1 中 所 示 ) 到 达 者 看 到 系统 中 有 
n 个 人 的 速率 ( 即 AP,) 等 于 离开 者 留 n 个 人 在 系统 中 的 速率 ( 即 JPn+1). 

(ii) 我 们 也 可 以 用 排队 价格 恒等式 证 明 Ps = (和 /1)"(1 一 和 /1). 假设 对 于 固定 
的 n>0, 只 要 系统 中 至 少 有 mn 个 顾客 ,第 nn 个 最 老 的 顾客 (年 龄 从 顾客 到 达 开始 度 
量 ) 单位 时 间 支 付 1. 令 X 是 系统 中 顾客 的 稳定 态 人 数 , 因为 只 要 XX 至 少 是 n, 系 
统 在 每 个 单位 时 间 就 赚 得 1, 由 此 推出 

系统 赚钱 的 平均 速率 = P{X >n} 
同样 , 因为 一 个 到 达 时 看 到 系统 中 少 于 n 一 1 个 人 的 顾客 将 支付 0, 而 一 个 到 达 时 看 
到 系统 中 至 少 n 一 1 个 人 的 顾客 将 在 以 一 个 速率 为 J 的 指数 分 布 时 间 内 每 单位 时 
间 支 付 1, 即 0 
一 个 顾客 支付 的 平均 金额 = azP{X >n—1} 
所 以 ， 排队 价格 恒等式 导致 
P{X >n}= (MWP{X >n-1), n>0 
P{X>n}= (NAP{X >n-1}= (MA2P{X >n—-2} 
= = (MW)"P{X 20}= M/W" 


所 以 
P{X=n}=P{X>n}-P{X>n+1}= /WD"( -MW 四 
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现在 我 们 尝试 用 极限 概率 P 来 表示 量 L、Le、W 和 We. 因为 Ps 是 系统 恰 
好 包含 n 个 顾客 的 长 程 概率 , 系统 中 顾客 的 平均 数 显然 为 


/A 依 蘑 
0) -A 人 
其 中 最 后 的 等 式 用 到 了 代数 恒等式 ' 
Dn"= 0 = 


现在 可 以 借助 方程 (8.2) 和 方程 (8.3) 得 到 其 Lo、W 和 We. 也 就 是 说 , 因为 
Xa = X, 我 们 由 方程 (8.7) 得 


L 1 
We 
Wao=W-ElS=W 人 (8.8 
有 站 汉 
入 2 
Lo = MWo = 一 一 一 一 
2 oT ph 


例 8.3 ”假设 顾客 以 每 12 分 钟 一 个 的 泊 松 速率 到 达 , 而 服务 时 间 是 速率 为 每 8 分 
钟 一 个 服务 的 指数 随机 变 基 . 问 工 和 W 是 多 少 ? 
解 由 于 入 = 1/12,/= 1/8, 我 们 有 

L=2, W=24 
因此 , 系统 中 顾客 的 平均 数 是 2, 而 每 个 顾客 在 系统 中 停留 的 平均 时 间 是 24 分 钟 . 

现在 假设 到 达 率 增加 20% 至 入 = 1/10. 间 工 和 W 对 应 的 改变 是 多 少 ? 同样 利 

用 方程 (8.7) 和 方程 (8.8), 我 们 得 到 

L=4, W=40 


因此 , 当 到 达 率 增加 20% 后 , 系统 中 的 顾客 平均 数 翻 一 香 . 
为 了 更 好 理解 , 将 方程 (8.7) 和 方程 (8.8) 写成 


__Mp lp 
A 
从 这 些 方程 我 们 可 以 看 到 , 当 和 /1 接近 于 1 时 , 和 /1 微小 的 增加 将 引起 工 和 W 很 
大 的 增加 . 国 


技术 性 注解 ”我 们 已 经 用 到 一 个 事实 , 如 果 一 个 事件 以 指数 速率 和 发生, 而 另 一 个 
事件 以 指数 速率 / 发 生 , 那么 , 两 者 中 任 一 个 事件 将 以 指数 速率 十 几 发 生 . 为 了 正 
式 地 检验 这 个 结论 , 令 五 是 第 一 个 事件 发 生 的 时 间 , 而 T2 是 第 二 个 事件 发 生 的 时 
间 . 那么 
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P{TNigt}=1-e™*, P{h<gt}=1-e” 
现在 如 果 我 们 对 直到 Ti 或 To 中 之 一 的 时 间 感 兴趣 , 那么 我 们 考虑 全 = min(Ti, 了 T2). 
P{T gt}=1-P{T>t}=1-P{min(T,T) > 二 
然而 min(Ti,T2) > 七 当 且 仅 当 和 7T2 都 大 于 ,因此 

P{T gt}=1-P{Ti >t,T >t}=1-P{N >t}P{T >+t} 
=1—e-Me-nt = 1—e-tnt 

于 是 , 了 有 速率 为 十 人 的 指数 分 布 , 我 们 验证 了 速率 的 相 加 . mn 

假设 一 个 M/M/1 稳定 态 的 顾客 ( 即 在 系统 已 经 长 时 间 运 行 后 到 达 的 一 个 顾 
客 ) 在 系统 中 总 共 呆 了 t 个 时 间 单 位 , 让 我 们 确定 这 个 顾客 到 达 时 其 他 已 出 现 的 顾 
客 数 N 的 条 件 分 布 . 也 就 是 说 , 以 W* 记 一 个 顾客 在 系统 中 停留 的 时 间 . 我 们 求 
P{N =n|W* = 里 . 现在 
fnw:(mt) _ P{N=n}fw-in(tIn) 

fw (t) fw-(t) 

其 中 fw-in(tin) 是 给 定 N =n 时 W" 的 条 件 密度 , 而 fw-(t) 是 W* 的 无 条 件 密度 . 
现在 , 给 定 N = n, 顾客 在 系统 中 待 的 时 间 以 ma + 1 个 具有 相同 速率 / 的 独立 指数 
随机 变 基 的 和 为 分 布 , 由 此 导出 给 定 N = n 时 W" 的 条 件 分 布 是 具有 参数 n 十 1 和 
上 的 件 马 分 布 . 所 以 , 记 C = 1/fw:(t)， 


P{N=nlW*=t}=CP{N= nue 


P{N =nlW* = 二 = 


= CQO/ 一 pe 天) (由 PASTA 原则 ) 
= 天 0- 
nl! 
其 中 = C(1 一 和 /pj)ne-r 不 依赖 于 n. 对 n 求 和 , 得 到 
1= DP{N=nlT=} -Ky = Ke 
n=0 n=0 
于 是 , K = e-X, 这 表明 


nm = =e 
‘ P{N=n|lW"* =t}=e€ a 


所 以 , 一 个 在 系统 中 总 共 停 留 时 间 t 的 顾客 所 看 到 人 数 的 条 件 分 布 是 均值 为 Xt 的 
泊 松 分 布 . 
此 外 , 作为 我 们 分 析 的 副产品 , 我 们 有 
fw:() =1C = Mpe r= (nN 


换 句 话 说 , 一 个 顾客 在 系统 中 停留 的 时 间 W*, 是 速率 为 /一 和 的 指数 随机 变量 . ( 作 
为 检验 , 注意 到 E[W"*] = 1/(1 一 入 ), 它 正好 是 方程 (8.8), 因为 W = E[W*].) 
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注 W" 为 什么 是 速率 为 1 一 和 的 指数 随机 交 量 的 另 一 个 论证 如 下 : 如 果 我 们 以 N 
记 一 个 到 达 者 看 到 的 在 系统 中 的 顾客 数 , 那么 这 个 到 达 者 在 离开 前 将 在 系统 中 停留 
N +1 个 服务 时 间 . 现在 
P{N+1=j}=P{N=j-—1}=(Mpy (1— MW, ji>1 

简 言 之 , 在 到 达 者 离开 前 必须 完成 的 服务 次 数 是 一 个 参数 为 1 - A/1 的 几何 随 宙 杰 
量 ， 所 以 , 在 每 次 服务 完成 后 我 们 的 顾客 将 以 概率 1 - XMN 离开 ， 于 是 , 不 管 顾 客 
已 经 在 系统 中 呆 了 多 久 , 他 在 下 一 个 h 时 间 内 离开 的 概率 , 是 一 个 服务 在 这 个 区 间 
中 结束 的 概率 /加 + o(h) 乘 以 1 一 和 /1， 即 顾客 在 下 一 个 h 时 间 单位 内 将 以 概率 
(1 一 和 h 十 o(h) 离开 , 这 说 明 W* 的 风险 率 函数 是 常数 一 入 . 但 是 只 有 指数 随机 变 
量 有 常数 风险 率 , 所 以 , 我 们 得 到 结论 , W" 是 速率 为 /一 和 的 指数 随机 变量 . 

下 一 个 例子 解释 了 检验 悖 论 . 
例 8.4 ”对 于 一 个 在 稳定 态 的 M/M/1 排队 系统 , 下 一 个 到 达 者 看 到 系统 中 及 n 个 
人 的 概率 是 多 少 ? 
解 ” 虽 然 由 PASTA 原则 直观 地 看 上 去 , 这 个 概率 应 该 正好 是 (和 1)"(1 一 和 /1), 但 
我 们 必须 小 心 . 因为 如 果 t 是 当前 时 间 , 那么 从 t 开始 到 下 一 个 到 达 者 为 止 的 时 间 
是 速率 为 和 的 指数 分 布 , 而 且 独 立 于 从 t 前 最 后 一 次 到 达到 t 的 时 间 , ( 当 t 一 oo 时 
在 极限 意义 下 ) 它 也 是 速率 为 和 的 指数 随机 变 其 . 于 是 , 虽然 泊 松 过 程 的 相继 到 达 
之 间 的 时 间 是 速率 为 和 的 指数 随机 变 基 , 在 t 之 前 的 上 一 个 到 达 者 与 + 之 后 的 首 个 
到 达 者 之 间 的 时 间 是 两 个 独立 指数 随机 变 其 的 和 . (这 正 是 检验 悖 论 的 说 明 , 这 个 悖 
论 的 产生 是 因为 包含 一 个 给 定时 间 的 到 达 者 之 间 的 间隔 时 间 长 度 大 于 一 个 普通 的 
到 达 间 隔 时 间 , 见 7.7 节 .) 

以 Na 记 下 一 个 到 达 者 看 到 的 人 数 , 并 且 令 X 为 目前 在 系统 中 的 人 数 . 在 条 件 
和 下, 得 到 


P{Ns =n}= 六 Ptw =n|X =k}P{X =k} 


k=0 
= DP{Na =n|X =k}(/A)(1 MD 
k=0 
= DP{Na =nlX =k}(VA*( — Nn) 
k=n 
= DP{N =nlX =n+i}(MA)"( — Mp) 
i=0 
现在 , 对 于 n > 0, 假定 目前 在 系统 中 有 n+i 人 , 如 果 在 一 个 到 达 者 之 前 我 人 有 i 次 
服务 , 下 一 个 到 达 者 将 看 到 n 人 , 而 且 是 在 下 一 个 服务 完成 之 前 的 一 个 到 达 . 由 指 
数 随 机 变 基 缺乏 记忆 性 , 得 到 
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PIN =nlX=nt9= (二 i) 人 


A+p 
从 而 , 对 于 n>0， 


ee 


eh 
= WANA (sa) 
= WW" NN 
另 一 方面 , 当 目前 在 系统 中 有 i 人 时 , 下 一 个 到 达 者 看 到 系统 空 着 的 概率 是 在 下 一 
个 到 达 前 有 i 次 服务 的 概率 . 所 以 , P{N。 = 0IX = 引 二 (二) ,由 此 给 


P{N =0}= (5) (2 ) G-MM 
A 
-aoE (i) =Q+ND -NA 
作为 检验 , 注意 
DP{Na =n}=(1— Mn) LE + A/p+ Bor 
n=0 n=1 


= 0 ND DA) 


i=0 
=1 


注意 P{N。 = 0} 大 于 Po =1- MA 这 表明 下 一 个 到 达 者 看 到 系统 空 着 的 可 能 
性 要 比 一 个 平均 的 到 达 者 的 可 能 性 更 大 , 这 就 解释 了 检验 悖 论 , 即 到 下 一 位 顾客 与 
前 一 位 到 达 者 之 间 的 时 间 间 隔 是 两 个 速率 为 和 的 独立 指数 随机 变量 的 和 , 同样 , 由 
于 检验 悖 论 我 们 可 以 预期 , E[N。] 小 于 一 个 到 达 者 看 到 的 顾客 的 平均 数 L, 这 确实 
是 正确 的 , 并 可 以 由 


1 EN = Dap Mp) = AL <L 


n=1 
得 到 . 国 
8.3.2 ”有 限 容量 的 单条 服务 线 的 指数 排队 系统 
在 前 面 的 模型 中 , 我 们 假定 在 系统 中 同一 时 间 的 顾客 数 没有 限制 . 然而 , 在 现实 


中 总 存在 一 个 有 限 的 系统 容量 N, 即 任何 时 间 在 系统 中 的 顾客 数 都 不 能 超过 N. 对 
此 , 我 们 的 意思 是 , 若 一 个 到 达 者 发 现 已 经 有 NN 个 顾客 出 现 , 则 他 不 再 进入 系统 . 
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同 前 面 一 样 , 我 们 用 已 (0 < n < N) 记 系统 中 有 个 顾客 时 的 极限 概率 . 由 速 
率 相等 原理 得 到 以 下 平衡 方程 组 


状态 过 程 离开 的 速率 = 进入 的 速率 
0 和 AP =pP 
1<n 和 < 和 N-1 (+ 门 P = APn1 + pPnt1 
N BEAR 


关于 状态 0 的 推理 与 前 面 一 样 . 即 当 处 于 状态 0 时 , 过 程 离开 将 只 能 通过 一 个 
到 达 者 (以 速率 A 发 生 ) 达到 , 因此 过 程 贾 开 状态 0 的 速率 是 和 Po. 另 一 方面 , 过 程 
进入 状态 0 只 能 通过 从 状态 1 离开 1 个 顾客 达到 , 因此 , 过 程 进入 状态 0 的 速率 是 
AP. 对 状态 n(1 < n < NN) 的 方程 与 以 前 的 一 样 . 而 对 状态 N 的 方程 与 以 前 不 同 ， 
因为 现在 离开 状态 N 只 能 通过 一 个 离开 者 达成 , 由 于 在 状态 N 时 一 个 到 达 者 将 不 
会 进入 系统 ; 同样 状态 N 只 能 通过 一 个 到 达 者 由 状态 N - 1 进入 (因为 这 时 不 再 
有 状态 N + 1). 

我 们 现在 可 以 正如 我 们 对 于 无 穷 容 量 模 型 做 的 那样 求解 平衡 方程 组 , 也 可 以 通 
过 直接 应 用 离开 者 留 下 n 一 1 人 的 速率 等 于 到 达 者 看 到 n 一 1 人 的 速率 而 节省 几 行 
文字 . 借助 这 个 结果 我 们 得 到 


bPn = APn-i1, n=1,°,N 
于 是 a 
5 
几 人 pk 


利用 事实 学-o Pa = 1, 我 们 得 到 
NN 1 一 (MA)N+1 
1-A2 (2) -ne | 


n=0 


从 而 
B= ND 
ICAOAT 
因此 由 前 面 的 方程 我 们 得 到 
NPOND) 0... 
P= nb N 


注意 在 这 种 情形 下 没 必要 强加 条 件 MA < 1. 由 定义 可 知 队列 的 大 小 有 界 , 所 以 不 
可 能 无 穷 地 增加 . 
如 前 , 工 可 以 用 Ps 表示 为 


N N n 
__(-M) 入 
b= Se 多 
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做 一 些 代数 运算 可 得 
并 -AL+NCVMOxt (N+ DWN] 
(4— ND- Mn+Y 

在 推导 一 个 顾客 在 系统 中 停留 的 期 望 时 间 W 时 , 对 于 一 个 顾客 的 含义 我 们 必 
须 细心 一 点 . 特别 地 , 是 否 包括 那些 看 到 系统 满员 而 根本 就 没有 进入 的 “顾客 ” 呢 ? 
或 者 , 是 否 只 是 想得到 实际 进入 系统 的 顾客 在 系统 中 停留 的 平均 时 间 呢 ? 当然 这 两 
个 问题 将 导向 不 同 的 回答 . 在 第 一 种 情形 , 我 们 有 Xe = 和 ; 而 在 第 二 种 情形 , 因为 到 
达 者 实际 进入 系统 的 比例 是 1 - Py, 由 此 推出 Xe = 和 (1 - Py). 一 旦 清楚 了 我 们 对 
于 一 个 顾客 的 含义 , W 可 以 由 下 式 得 到 ， 

a 


和 a 

例 8.5 ”假设 提供 速率 为 / 的 服务 每 小 时 的 花费 是 cy 美元 . 同时 我 们 对 每 个 接受 
服务 的 顾客 收取 4 美元 . 如 果 系 统 的 容量 为 N, 使 得 我 们 的 总 利润 达到 最 大 的 服务 
率 / 是 多 少 ? 
解 ”为 了 求解, 我 们 假设 速率 为 人 让 我 们 确定 每 小 时 收 到 的 金额 减 去 每 小 时 用 去 
的 金额 , 这 就 是 我 们 每 小 时 的 利润 , 我 们 可 以 选取 /使 之 达到 最 大 . 

现在 潜在 的 顾客 以 速率 和 到 达 . 然而 , 他 们 当中 有 一 定 的 比例 并 不 进入 系 
统 , 即 那些 到 达 时 发 现 系 统 中 已 经 有 N 个 顾客 的 人 将 不 再 进入 系统 . 由 于 Py 是 系 
统 满员 的 时 间 比 例 , 由 此 推出 进入 的 顾客 以 每 小 时 A(1 - Pv) 的 速率 到 达 . 由 于 每 
个 顾客 付费 4 美元 , 由 此 推出 金额 以 每 小 时 和 (1 一 Pw)4 的 速率 到 来 , 并 且 因为 金 
额 以 每 小 时 cy 的 速率 用 去 , 这 样 就 推出 每 小 时 的 总 利润 为 

每 小 时 的 利润 = AL- Py)4A 一 cp 
_ (CMVAOX(L- | i A40 一 (MA 

1— (MN+ 1— (Mn) N+ 
例如 , 若 N=2, 和 =1,4=10,c=1, 则 


= 4 E 一 以 
于 入 
10|1 一 [= 
每 小 时 的 利润 = [ 加 ] =p= 9 = 
1 1- (8) 
为 了 使 利润 最 大 , 微分 得 
3_ gu2 
二 (等 小 时 的 利润) = 10G 的 让 了 一 1 


R= 
使 我 们 的 利润 最 大 化 的 A 的 值 , 可 以 将 它 等 于 0, 通过 数值 地 求解 得 到 . 
我 们 说 一 个 排队 系统 在 系统 中 没有 顾客 的 闲 期 与 在 系统 中 至 少 有 一 个 顾客 的 
忙 期 之 间 转 换 . 我 们 将 推导 在 忙 期 流失 的 顾客 数 的 期 望 值 和 方差 以 结束 本 节 , 其 中 
如 果 一 个 顾客 到 达 时 系统 处 于 饱和 状态 , 我 们 就 说 这 个 顾客 流失 . 
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令 Ln 表示 在 有 限 容 量 M/M/1 队列 的 忙 期 流失 的 顾客 数 , 在 这 个 队列 中 , 当 到 
达 者 发 现 有 nn 个 顾客 在 系统 中 时 他 就 不 再 进入 系统 . 为 了 推导 E[Zn] 和 Var(Zn) 的 
表达 式 , 假设 忙 期 刚刚 开始 并 取 条 件 于 下 一 个 事件 是 到 达 还 是 离开 . 现在 有 

7 二 上 0， 车 在 下 一 个 顾客 到 达 之 前 服务 完成 
1， 若 在 服务 完成 之 前 下 一 个 顾客 到 达 


注意 若 了 = 0, 则 在 下 一 个 顾客 到 达 之 前 忙 期 已 经 结束 , 所 以 在 那个 忙 期 没有 顾客 流 
失 . 因此 
ElLnlT =0] = Var(Ln|I =0)=0 

现在 假设 在 第 一 个 服务 时 间 结 束 之 前 下 一 个 到 达 者 出 现 , 所 以 1 二 1. 那么 若 mn= 1 
则 下 一 个 到 达 者 将 流失 , 如同 忙 期 在 那 时 刚刚 重新 开始 一 样 , 于 是 流失 顾客 的 条 件 
数 与 1+ Ci 有 相同 的 分 布 . 男 一 方面 ,车 n> 1, 则 在 下 一 个 到 达 者 出 现时 将 有 两 个 
顾客 在 系统 中 , 其 中 一 个 顾客 在 接受 服务 , 而 “第 二 个 顾客 " 刚刚 到 达 . 因为 在 忙 期 
流失 顾客 数 的 分 布 与 顾客 接受 服务 的 顺序 无 关 , 所 以 假设 “第 二 个 顾客 " 被 搁置 一 
边 , 直至 只 剩 他 一 个 顾客 时 他 才能 接受 服务 . 那么 容易 看 出 , 直至 “第 二 个 顾客 " 开 
始 接受 服务 时 流失 的 顾客 数 与 当 系统 容量 是 n 1 时 忙 期 流失 的 顾客 数 有 相同 的 
分 布 . 此 外 , 在 “第 二 个 顾客 " 接受 服务 后 开始 的 忙 期 中 又 流失 的 顾客 数 与 当 系 统 容 
二 是 n 时 忙 期 流失 的 顾客 数 有 相同 的 分 布 . 于 是 给 定 7 = 1 时 , Lw 的 分 布 等 于 两 个 
独立 随机 变 基 和 的 分 布 , 其 中 一 个 随机 变 基 与 L。-! 同 分 布 , 表示 在 系统 中 再 次 只 
有 一 个 顾客 之 前 流失 的 顾客 数 , 另 一 个 随机 变 贡 与 La 同 分 布 , 表示 从 再 次 只 有 一 
个 顾客 时 起 直到 忙 期 结束 时 又 流失 的 顾客 数 . 于 是 


ElL,lf =1] = 1+E[Li], 若 n=1 
S 【Ell]+ElLnJ， 若 n>1 


Var(Li1), n=1 
Var sles) { Vs + Var(Ln), nS 
令 
mn = E[Ln], vn = Var(Ln) 

则 用 mo = 1,vo = 0, 上 面 的 方程 可 以 重 写 为 

E[Ln|1] = I(mn_i + mn) (8.9) 

Var(Ln|1) = I(vn_1 + wn) (8.10) 
利用 P{T = 1} = P{ 服 务 完成 之 前 下 一 个 顾客 到 达 }= be 三 1 一 P{I =0}, 在 方 
程 (8.9) 两 边 取 期 望 可 得 


入 入 
mn = py +mn-l] 或 m= et 
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从 mi = 和 /4 开始 , 可 以 得 到 结果 
mm 一 (MA 
我 们 利用 条 件 方差 公式 来 求 w. 利用 方程 (8.9) 和 方程 (8.10) 可 得 
vn= (vn + wn)EL] + (mn + mn-1)?Var(7) 


和 A kh 
A+HAtTh 

AH 
(和 十 有 2 


= "+ 
2 
= i + wn-1) + (Ap)? (2 十 1) 
= td) + 
于 是 有 
pon = Mon1 + (A 十 站 (MHzn-1 


令 p= MA 我 们 有 
vn = pun_l 十 pzn-1 十 pm 


从 而 有 
=p+p 
va=p2+2p3 +p4 
ua 一 p3 十 204 十 205 十 [6 
一 p4 十 265 十 206 十 207 十 8 
一 般 地 , 我 们 有 


2n 一 1 
vn=p"+2 》 万 十 pn 
J=n+1 


8.3.3” 生 灭 排队 模型 


一 个 到 达 速 率 与 离开 速率 依赖 于 系统 中 的 顾客 数目 的 指数 排队 模型 , 是 我 们 熟 
知 的 生 灭 排队 模型 . 在 系统 中 有 ? 个 顾客 时 , 以 An 记 到 达 速 率 , 以 jn 记 离开 速率 . 
粗略 地 说 , 当 系 统 中 有 m 个 顾客 时 , 直至 下 一 个 顾客 到 达 的 时 间 是 速率 为 Xn 的 指 
数 随机 变 基 , 而 且 独 立 于 下 一 个 速率 为 pn 的 指数 离开 时 间 . 等 价 地 , 更 形式 化 叙 
述 , 只 要 系统 中 有 n 个 顾客 , 直至 发 生 下 一 次 到 达 或 下 一 次 离开 的 时 间 就 是 速率 为 


和 n + jn 的 指数 随机 变 基 , 而 且 与 它 发 生 多 久 独立 , 它 是 一 次 概率 为 


守卫 一 的 到 
m 十 An 
达 . 现在 我 们 给 出 生 灭 队列 的 一 些 例子 . 
(a) M/M/1 排队 系统 
因为 到 达 速率 总 是 X, 而 且 当 系 统 不 空 时 离开 速率 是 儿 所 以 M/M/1 是 具有 
Mn= 和 A, n>0 
Ln=4, n>1 
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的 生 灭 模型 
(b) 障碍 M/M/1 排队 系统 
考虑 M/M/1 系统 , 但 是 现在 假定 一 个 顾客 在 到 达 时 发 现 此 系统 已 有 n 人 , 他 
将 只 以 概率 an 加 入 这 个 系统 (也 就 是 , 以 概率 1 - an 受阻 于 加 入 这 个 系统 ). 那么 
这 个 系统 是 具有 


= A n 
Hn = n 
的 生 灭 模型 . 
含有 限 容量 N 的 M/M/1 是 它 的 特殊 情形 , 其 中 
1， 车 n<N 
0 { 0， 若 mn> N 
(ce) M/M/k 排队 系统 
考虑 顾客 按 速率 为 的 泊 松 过 程 到 达 的 条 服务 线 的 系统 . 顾客 到 达 时 如 果 
大 条 服务 线 中 的 任意 一 条 空闲 就 立刻 进入 服务 . 如 果 有 条 服务 线 都 忙碌 , 那么 顾客 
加 入 队列 . 当 一 条 服务 线 完 成 了 服务 , 被 服务 的 顾客 就 离开 系统 , 而 如 果 队 列 中 有 顾 
客 , 那么 等 待 最 长 的 顾客 就 进入 服务 , 所 有 服务 时 间 都 是 速率 为 上 的 指数 随机 变 莽 . 
因为 顾客 总 是 以 速率 和 到 达 , 所 以 
和 Xnm 一 和 nz>20 
现在 , 当 系 统 中 有 n 和 个 顾客 时 , 每 个 顾客 都 将 接受 服务 , 所 以 直到 首 个 顾客 离开 
的 时 间 是 个 速率 为 /的 独立 指数 随机 变 基 的 最 小 值 , 因而 是 速率 为 ny 的 指数 随 
机 变量 . 另 一 方面 , 如 果 在 系统 中 有 n > 大 个 顾客 , 那么 这 n 人 中 只 能 用 个 接受 
服务 , 所 以 此 时 的 离开 速率 是 ky. 因此 M/M/k 是 以 
mm 入 儿 记 0 
为 到 达 速率 , 同时 以 
np， 若 m 委 大 
人 { ku， 若 n> 
为 离开 速率 的 生 灭 排队 模型 . 图 
为 了 分 析 一 般 的 生 灭 排队 模型 , 以 P 记 在 系统 中 有 n 人 的 时 间 的 长 程 比例 ， 
那么 , 或 者 作为 由 
状态 ”过 程 离开 的 速率 = 过 程 进入 的 速率 
n=0 NP= pnP 
n>1 (Mn + pn)Pn = Mn-iPni + pnt+iPn+1 


给 出 的 平衡 方程 组 的 结果 , 或 者 直接 利用 到 达 的 人 看 到 系统 中 有 n 人 的 速率 等 于 离 
开 的 人 离开 时 看 到 系统 有 n 人 的 速率 这 一 结果 , 我 们 得 到 


MnPn=pnniPnn, n>0 
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或 者 等 价 地 
Pn=— Ph,, n>0 
Hn+1 
于 是 
P=h,, 
和 
P=2P 
AI 
庙 三 a 
H2 KH2pt1 
起 宇 X22p _ NNN 
Hs3 AsH2A 
而 一 般 地 
en | 
Pik2 An 


利用 并 ?oo Ps = 1, 得 到 


x 
三 二 a ya 


pr 和 ap 和 
因此 有 
1 
二 过 二 
oo NAMn-l 
T+ ne pa pm 
以 及 
NA Mn 
Es AH2 Hn 
P= a n>1 
1+ Yn Hip2*** pn 


A 车 n<k 


Hp2 "hh 和 
9 REE, 着 n>k 
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= CU 


因此 , 利用 一 , 我们 有 


1 
1+ rN /n+ Dn NRA)™kt /RY 
OE 


pr 


P= 


PP, =P — 若 n<k ! 


Be ers Mik 
兴 上 式 推出 , 模 限 村 素 存 在 的 条 件 是 A < Wi， 因为 ii 是 所 有 的 服务 线 者 化 碌 时 的 
服务 速率 , 上 式 正 是 当 系统 中 有 许多 顾客 时 , 为 了 存在 极限 概率 , 服务 速率 必须 大 于 
到 达 速 率 这 一 直观 条 件 . 四 
例 8.7( 带 有 焦躁 顾客 的 M/M/1 排队 系统 ) 考虑 按 速率 \ 的 泊 松 过 程 到 达 的 单 
服务 线 排队 系统 , 其 服务 分 布 是 速率 / 的 指数 分 布 , 但 是 现在 假设 每 个 顾客 在 离开 
系统 前 , 只 在 队列 中 停留 速率 a 的 指数 时 间 . 假定 这 种 焦躁 的 时 间 独 立 于 其 他 的 一 
切 , 但 是 进入 服务 的 顾客 总 接受 服务 直至 完成 . 这 种 系统 可 以 用 生 灭 率 为 


MAn=A, n>0 
=jy+(n—l)a, n>1 


的 生 灭 过 程 来 建 模 

应 用 上 面 得 到 的 极限 概率 我 们 就 能 解答 系统 的 各 种 问题 . 例如 , 假设 我 们 要 确 
定 到 达 者 中 接受 服务 的 比例 . 我 们 回忆 莽 rs, 它 可 由 已 接受 服务 顾客 的 平均 速率 入。 
得 到 , 并 注意 
六 
为 了 验证 上 述 方程 , 以 Na(t) 和 Ns(t) 分 别 记 直至 时 刻 t 的 到 达 的 人 数 和 服务 的 人 
数 . 那么 


ns 一 


Nt) _ » Ne(D/t _ 
A XN 

因为 当 系 统 空 时 服务 后 离开 速率 是 0, 而 当 系统 非 空 时 服务 后 离开 速率 是 1, 由 此 
推出 和 ,= jk(1 一 Po), 由 它 可 得 


Ls 


a A 站 


对 于 生 灭 排队 系统 , 为 了 确定 一 个 顾客 在 系统 中 所 待 的 平均 时 间 W, 我 们 使 用 
基本 排队 恒等式 L = Xe 三. 因为 工 是 系统 中 的 顾客 平均 数 ， 


oo 
L= > nPp, 
n=0 
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再 者 , 因为 当 系统 中 有 n 人 时 的 到 达 速 率 是 入 , 而 系统 中 有 n 人 的 时 间 比 例 是 已 ， 
我 们 看 到 顾客 的 平均 到 达 速率 为 


因此 


现在 考虑 an 等 于 看 到 系统 中 有 n 人 的 到 达 者 的 比例 . 因为 只 要 在 系统 中 有 n 人 ， 
到 达 的 速率 是 Xw, 由 此 推出 , 到 达 者 看 到 系统 中 有 n 人 的 速率 是 和 AnPn. 因此 , 在 长 
时 间 了 内 近似 Xa7 个 到 达 者 中 , 看 到 系统 中 有 n 人 的 到 达 者 近似 地 为 .PaT. 令 
了 趋向 无 穷 给 出 , 看 到 系统 中 有 n 人 的 到 达 者 的 长 程 比例 是 
MnPn 
和 
现在 我 们 考察 忙 期 的 平均 长 度 , 此 处 我 们 说 系统 在 系统 中 没有 顾客 的 闲 期 与 系统 中 
至 少 有 一 个 顾客 的 忙 期 之 间 转 换 . 现在 , 一 个 闲 期 开始 于 系统 为 空 的 时 候 , 并 且 结 
束 于 下 一 个 顾客 到 达 的 时 候 . 因为 系统 为 空 时 的 到 达 速 率 是 和 o, 于 是 我 们 推出 , 独 
立 于 以 前 发 生 的 一 切 , 闲 期 的 长 度 是 速率 Xo 的 指数 随机 变 基 ， 因为 一 个 忙 期 开始 
于 系统 中 有 一 个 顾客 的 时 候 , 并 且 结 束 于 系统 为 空 的 时 候 . 容易 看 出 相继 的 忙 期 长 
度 是 独立 同 分 布 的 . 对 于 了 > 1, 以 石和 B; 分 别 记 第 j 个 闲 期 和 第 7 个 忙 期 的 长 
度 . 现在 , 在 前 面 的 沁 )_1(1; + B;) 个 时 间 单 位 中 系统 为 空 的 时 间 是 半 六 1 1;. 因此 
系统 空 的 时 间 的 长 程 比例 Po 可 以 表示 为 
= 系统 为 空 的 时 间 的 长 程 比例 
二 中 必 
二 :十 有 十 BI 十 … 十 互 " 

生怕 (十 … 十 三 ) 人 mn 

no (Nn ++ In)/n+ (Bi+..+ Bn)/n 

= ED] 

~ EI[7] + E[B] 
其 中 了 和 B 分 别 表示 闲 期 和 忙 期 的 长 度 , 其 中 最 后 一 个 等 号 来 自强 大 数 定律 . 因此 ， 
利用 EDI] = 1/Xo, 就 得 到 


an 一 


(8.11) 


1 
P= THE 
因此 

I 


EIB] = (8.12) 


1 


例如 , 在 M/M/1 队列 中 , 这 导致 E[B] = Ns; 二 
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另 一 个 重要 的 基 是 在 忙 期 中 有 n 个 顾客 的 总 时 间 Th. 为 了 确定 它 的 均值 , 我 
们 注意 E[T"] 是 相继 的 忙 期 间 系统 内 有 nn 个 顾客 的 平均 时 间 , 因为 相继 的 忙 期 间 的 
平均 时 间 是 E[B] + EIJ], 这 就 导致 
已 = 在 系统 有 n 个 顾客 的 长 程 时 间 比 例 
El[T"] 1 


™ El + Ea] 
_ ElT"]P 
= -Ei 来 自 方程 (8.11) 
四 PP AN 
n 1 ”Am 一 1 
BW pp 
作为 验证 , 我 们 注意 
B= 
n=1 
于 是 


oo 1 包 
Bal= 2 P= RR- pT 


这 与 (8.12) 式 是 一 致 的 . 

对 于 M/M/1 系统 , 上 式 给 出 了 E[Tn] = 和 "1/p". 

尽管 在 生 灭 排队 模型 中 系统 的 状态 正 是 系统 中 的 顾客 数目 , 但 还 有 其 他 的 指数 
模型 , 其 中 更 为 精细 的 状态 空间 是 必要 的 . 我 们 考察 一 些 例子 以 说 明 这 一 点 . 


8.3.4 擦 鞋 店 


考虑 一 个 设 有 两 张 工 作 椅 的 擦 鞋 店 . 假设 到 达 的 顾客 首先 走向 椅子 1 , 当 他 在 
椅子 1 的 服务 完成 时 . 他 或 者 走 到 椅子 2, 当 这 个 椅子 是 空 着 的 时 候 , 或 者 坐 在 椅子 
1 上 面 等 待 直到 椅子 2 变 成 空 的 . 假设 潜在 的 顾客 只 在 椅子 1 是 空 着 的 时 候 才 进 店 . 
(于 是 , 例如 , 即使 有 顾客 在 椅子 2 上 , 一 个 潜在 的 顾客 还 可 能 进 店 .) 

如 果 我 们 假设 潜在 的 顾客 按 速率 为 ^ 的 泊 松 过 程 到 达 , 假定 两 个 椅子 的 服务 是 
独立 的 , 且 分 别 具 有 指数 速率 各 与 ba, 那么 

(a) 潜在 的 顾客 进 店 的 比例 是 多 少 ? 

(b) 在 店 中 的 顾客 的 平均 数 是 多 少 ? 

(c) 进入 的 顾客 在 系统 中 停留 的 平均 时 间 是 多 少 ? 

(d) 进 店 顾客 中 阻碍 者 的 比例 ms 是 多 少 ? 如 果 一 个 进 店 顾客 在 完成 椅子 1 的 
服务 后 还 在 等 待 椅子 2 上 的 顾客 完成 服务 . 则 他 就 是 一 个 阻碍 者 . 
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我 们 必须 首先 决定 一 个 合适 的 状态 空间 ， 显 然 这 个 系统 的 状态 空间 必须 比 只 
提供 系统 中 的 顾客 数 包含 更 多 的 信息 . 例如 , 详细 到 系统 中 只 有 一 个 顾客 是 不 够 的 ， 
我 们 还 要 知道 他 在 哪 张 椅子 上 . 进一步 , 如 果 我 们 只 知道 系统 中 有 两 个 顾客 也 是 不 
够 的 , 我 们 不 知道 , 在 椅子 1 上 的 顾客 是 仍旧 在 接受 服务 , 还 是 正在 等 待 椅子 2 中 的 


人 结束 服务 . 为 了 考虑 到 这 些 , 我 们 用 由 5 个 状态 (0,0), (1,0), (0,1),(1,1) 和 (6,1) 
组 成 的 状态 空间 . 这 些 状态 有 如 下 解释 : 

状态 解释 

(0,0) 在 系统 中 没有 顾客 

(1,0) 在 系统 中 有 一 个 顾客 , 且 他 在 椅子 1 上 

(0,1) 在 系统 中 有 一 个 顾客 , 且 他 在 椅子 2 上 

(LD) 在 系统 中 有 两 个 顾客 , 都 在 接受 服务 

(6,1) 在 系统 中 有 两 个 顾客 , 椅子 1 上 的 顾客 已 经 


完成 了 其 接受 的 服务 且 在 等 待 椅子 2 空 出 来 

注意 当 系统 在 状态 (b, 1) 时 , 在 椅子 1 上 的 人 虽然 不 再 接受 服务 , 但 却 仍然 “ 阻 
但 " 了 潜在 的 顾客 进入 系统 . 

在 写 出 平衡 方程 之 前 , 画 一 个 转移 图 通常 是 值得 的 . 首先 对 每 个 状态 画 一 个 贺 
圈 , 而 后 画 一 个 箭头 并 标 以 过 程 从 一 个 状态 到 另 一 个 状态 的 速率 . 这 个 模型 的 转移 
图 如 图 8.1 所 示 . 这 个 图 的 解释 如 下 : 从 状态 (0,0) 到 状态 (1,0) 的 箭头 标 以 和 表示， 
当 过 程 处 在 状态 (0,0) 时 , 即 系 统 空 着 时 , 它 通过 一 个 到 达 者 以 速率 入 到 状态 (1,0). 
从 (0,1) 到 (1,1) 的 箭头 解释 类 似 . 

当 过 程 处 于 状态 (1, 0) 时 , 若 椅子 1 上 的 顾客 结束 了 服务 , 他 将 以 速度 /ua 到 状 
态 (0,1); 因此 从 (1,0) 到 (0,1) 的 箭头 标 以 yu. 从 (1,1) 到 (6b,1) 的 箭头 解释 类 似 . 

当 在 状态 (b, 1) 时 , 在 椅子 2 上 的 顾客 完成 了 服务 (这 以 速率 ja 发 生 ) 时 , 过 程 
将 到 状态 (0,1), 因此 从 (b,1) 到 (0,1) 的 箭头 标 以 jo. 同样 , 当 在 状态 (1,1) 时 , 过 


图 8.1 转移 图 
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程 将 到 状态 (1, 0), 当 椅子 2 上 的 顾客 结束 了 服务 , 因此 , 从 (1,1) 到 (1,0) 的 箭头 标 
以 jw2. 最 后 , 如 果 过 程 在 状态 (0,1), 那么 , 当 椅子 2 上 的 顾客 完成 了 他 的 服务 时 , 它 
将 回 到 状态 (0,0), 故而 从 (0,1) 到 (0,0) 的 箭头 标 以 ja. 

因为 不 存在 其 他 可 能 的 转移 , 所 以 这 样 就 完成 了 转移 图 . 

为 了 写 出 平衡 方程 , 我 们 将 进入 状态 的 箭头 ( 乘 以 他 们 的 源 状态 的 概率 ) 的 和 ， 
与 从 这 个 状态 出 去 的 箭头 ( 乘 以 所 到 的 状态 的 概率 ) 的 和 置 成 相等 . 这 就 给 出 


状态 过 程 离开 的 速率 = 进入 的 速率 
(0, 0) 和 Foo = p2Po1 
(1, 0) MPio = MPoo + paP1 
(0, 1) (A+ 2) Po = p1Pio + p2Po1 
( 1) (1 + p2)Pn = 和 Pu 
(6, 1) ja 及 = pn Pn 

这 些 与 方程 


Po+Pio+Pn+Put+P=1 


一 起 , 可 以 求解 确定 极限 概率 . 尽管 求解 上 面 的 方程 组 比较 容易 , 但 最 终 的 解答 非常 
繁琐 , 因此 我 们 并 不 给 出 显 式 表达 式 . 然而 用 这 些 极限 概率 很 容易 回答 我 们 的 问题 
首先 , 由 于 在 状态 (0,0) 或 (0,1) 时 , 一 个 潜在 顾客 将 进入 系统 , 由 此 进入 系统 的 顾 
客 的 比例 是 Poo + Po1. 其 次 , 在 状态 (0,1) 或 (1,0) 时 , 系统 中 有 一 个 顾客 , 当 状态 
(1,1) 或 (b,1) 时 , 系统 中 有 两 个 顾客 , 由 此 在 系统 中 的 平均 顾客 数 工 由 


L= P+ Po+2(Pn + Pb) 


给 出 . 为 了 推导 进入 的 顾客 在 系统 中 停留 的 平均 时 间 , 我 们 利用 关系 W = Z/Xa. 由 
于 一 个 潜在 的 顾客 在 状态 (0,0) 或 (0,1) 时 进入 系统 , 所 以 Xe = 和 (Poo + Po1), 因此 
Pant+ Pio+2(Pu + Pa) 

MPoo + Poi) 
确定 进 店 顾客 中 阻碍 者 的 比例 的 一 种 方法 是 , 取 条 件 于 顾客 看 到 的 状态 . 因为 由 一 
个 进入 的 顾客 看 到 的 状态 , 不 是 (0, 0) 就 是 (0, 1), 而 进入 的 顾客 看 到 的 状态 为 (0， 


0) 的 概率 是 P((0. 1)1(0,0) 或 (0,)) = 二 -全 . 在 状态 (0, 1) 时 进入 的 顾客 , 若 在 


Pro+ Po 
椅子 2 还 未 结束 服务 前 完成 了 椅子 1 的 服务 , 则 他 是 一 个 阻碍 者 , 我 们 可 知 有 
-Ri HM 

Poo+ Poipit+ Ho 
得 到 进入 的 顾客 是 阻碍 者 的 比例 的 另 一 种 方法 是 , 以 入 记 顾 客 变 成 阻碍 者 的 速率 ， 
而 后 利用 进入 的 顾客 是 阻碍 者 的 比例 是 /和 a。. 因为 阻碍 者 来 源 于 当 状 态 是 (1, 1) 


WwW 


Tb 
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且 在 椅子 1 上 有 一 个 服务 , 由 此 推出 % = piPu, 所 以 


-AP 
MPoo + Po1) 


而 两 个 解 的 一 致 性 来 自 状态 (1, 1) 的 平衡 方程 . 国 
8.3.5 具有 批量 服务 的 排队 系统 


在 这 个 模型 中 , 我 们 考虑 一 个 单 服务 线 指数 排队 系统 , 服务 线 可 以 同时 服务 两 
个 顾客 . 只 要 服务 线 完成 一 个 服务 , 然后 它 对 后 面 的 两 个 顾客 同时 服务 . 然而 , 如 果 
只 有 一 个 顾客 在 队列 中 , 那么 它 就 给 这 一 个 顾客 服务 . 我 们 假定 , 不 管 它 服务 一 个 
顾客 还 是 两 个 顾客 它 的 服务 时 间 都 是 速率 为 4 的 指数 随机 变量 . 如 通常 那样 , 假设 
顾客 按 指数 速率 到 达 . 这 种 系统 的 一 个 例子 可 以 是 在 任何 时 候 至 多 能 载 两 个 乘 
客 的 一 个 电梯 , 或 者 一 辆 缆车 . 

看 起 来 这 个 系统 的 状态 不 仅 必须 告诉 我 们 有 多 少 人 在 系统 中 , 而 且 也 必须 告 
诉 我 们 是 一 个 人 还 是 两 个 人 在 接受 服务 ， 然 而 , 我 们 可 以 更 简单 地 解决 这 个 问题 ， 
不 考虑 系统 中 的 顾客 数 , 而 考虑 队列 中 的 顾客 数 ， 所 以 让 我 们 将 状态 定义 为 在 队 
列 中 等 待 的 顾客 数 , 而 在 没有 人 在 队列 中 时 用 两 个 状态 .就 是 说 , 我 们 有 状态 空间 
0',0,1,2,…, 其 解释 为 


Tb 


状态 解释 
0 没有 人 在 接受 服务 
0 系统 忙 , 但 是 没有 人 在 等 待 
nn>0 有 nn 个 顾客 在 等 待 
转移 图 如 图 8.2 所 示 , 且 平 衡 方程 组 是 
状态 过 程 离开 的 速率 = 进入 的 速率 
0 APy =hD 
0 Q+WP = APy + uP + uP 
nn>1 (入 十 站 已 = 入 P 1I + uPnt2 
现在 这 组 方程 
1 (入 二 AP = APn-1 + pPnt+2, n=1,2,.… (8.13) 


有 形 如 P= oa" 的 解 . 为 了 说 明 这 一 点 , 将 前 述 代 入 方程 (8.13) 得 到 
(A+HManP = Xan-IP+Hant2P 也 就 是 (和 +W)a = 入 +pa3 


求解 a, 得 到 3 个 根 


a=1. a= 


-1L-Vi+ -+VI+AN 
= 
2 


2 
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因为 前 两 个 显然 不 可 能 , 所 以 


V1I+4A// -1 
2 
因此 
Pn = a"P,, 4 
Pr= Po 


其 中 下 面 的 方程 得 自 第 一 个 平衡 方程 . (我 们 可 以 无 视 第 二 平衡 方程 , 因为 这 些 方程 
中 总 有 一 个 是 多 余 的 .) 为 了 得 到 Po, 我 们 推导 如 下 : 


S 
P+Pr+D P=1 


n=1 


五 


oo 
及 

1+< n| = 
| 1 


1 A|_ 
n+ 和 =! 
__A1-oa) 
TFT 


因此 ee 
a = 

PN) "> 
__k( -a) 
~ A+pu(l—a) 


ViI+4AA-1 


2 
注意 为 了 上 面 生效 , 我 们 需要 a < 1, 或 者 等 价 地 和 /1 < 2, 这 是 很 直观 的 , 因为 最 大 
服务 率 是 2p, 它 必须 大 于 到 达 率 以 避免 系统 过 载 . 


加 


四 


(8.14) 
Po 


其 中 


图 8.2 
现在 可 以 确定 所 有 相关 的 基 . 例如 , 确定 单独 接受 服务 的 顾客 的 比例 , 首先 注 
意 顾客 单独 接受 服务 的 速率 是 和 Po, + /Pi, 因为 当 系统 是 空闲 的 时 候 , 在 下 一 个 到 
达 前 , 一 个 顾客 将 单独 接受 服务 , 而 当 队列 中 只 有 一 个 顾客 时 , 在 离开 时 他 将 单独 地 
接受 服务 . 因为 这 时 顾客 接受 服务 的 速率 是 X, 由 此 可 得 
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单独 接受 服务 的 顾客 的 比例 = SC 二 4 


三 页 + 
同样 


Le= Dn oD 由 方程 (8.14) 


Ma i 0 
| 由 代数 恒等式 ma 二 人 
而 且 

Wa= 了 E,W= Wa+t 记 L=AW 
8.4 排队 网 络 
8.4.1 开放 系统 


考虑 一 个 拥有 两 条 服务 线 的 系统 , 顾客 按 速 率 为 和 的 泊 松 过 程 到 达 服 务 线 1. 
在 接受 完 服 务 线 1 的 服务 后 , 他 们 加 入 服务 线 2 前 面 的 队列 . 我 们 假设 两 个 服务 线 
都 有 无 穷 的 等 待 空间 . 每 个 服务 线 一 次 服务 一 个 顾客 且 服 务 线 i 服务 一 个 顾客 需 花 
费 速 率 为 jui(i = 1,2) 的 指数 时 间 . 这 样 的 系统 称 为 事 联 系统 或 序 页 系统 ( 见 图 8.3) 


{本 
1 2 


离开 系统 


图 8.3 受制 的 排队 系统 


为 了 分 析 这 个 系统 我 们 需要 追踪 在 服务 线 1 和 服务 线 2 中 的 顾客 数 . 所 以 我 
们 将 状态 定义 为 整数 对 (n,m) 一 一 意思 是 有 n 个 顾客 在 服务 线 1, 有 m 个 顾客 在 
服务 线 2. 平衡 方程 组 是 


过 程 离开 的 速率 = 进入 的 速率 


状态 
0 MPoo= p12Po,1 
, 4 
A+)Pno= 2P, AP,-: 
nO0n>0 0 i 十 
0,m:m>0 A 4 a BS ie pe 
nmnm>0 Fit pa)fnm= JH2Fnmtl t+ Hifntlm—1l (8.15) 


+APn_1m 
相 比 于 直接 求解 这 些 方程 (联合 学, Pm = 1), 我 们 更 愿意 先 猜测 一 个 解 , 然后 
再 验证 它 确实 满足 上 述 方程 . 我 们 首先 注意 到 在 服务 线 1 的 情况 正如 一 个 M/M/1 
模型 . 类 似 地 , 在 6.6 节 中 已 经 证 明 M/M/1 排队 过 程 的 离开 过 程 是 一 个 速率 为 的 
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泊 松 过 程 , 因此 服务 线 2 前 也 是 一 个 M/M/1 队列 . 所 以 在 服务 线 1 有 n 个 顾客 的 
概率 是 

Pfn 个 顾客 在 服务 线 1 = (之 ) (1- 立 ) 
关 似 地 ， 

P{m 个 顾客 在 服务 线 2} = (2) 人 - 翅 ) L 
现在 如 果 服务 线 1 和 服务 线 2 的 顾客 数 是 独立 的 随机 变量 , 那么 就 有 


St) Cp 


为 了 验证 Pa,m 确实 等 于 上 式 (而 因此 服务 线 1 的 顾客 数 与 服务 线 2 的 顾客 数 无 
关 ), 我 们 需要 做 的 就 是 验证 上 式 满足 方程 组 (8.15) 一 一 这 就 足够 了 , 因为 我 们 知道 
Pm 是 方程 组 (8.15) 的 唯一 解 . 现在 , 如 果 考 虑 (8.15) 的 第 一 个 方程 , 我 们 需要 


证 明 
入 入 入 入 入 
( 入 六 ) @ ww 司 0 人 攻 本 个 ) (- 加 
这 是 容易 验证 的 . 我 们 将 它 留 作 一 个 习题 , 证 明 由 (8.16) 给 出 的 Pm 满足 (8.15) 中 
所 有 的 方程 , 因此 Pm 是 极限 概率 . 
从 上 面 我 们 看 到 , 系统 中 顾客 的 平均 数 工 由 下 式 给 出 ; 
工 = > n+m)Pm 


SA 入 和 XN 和 
中 "(六 ) (1 六) + 导 m( 辣 ) (1- 训 ) 
入 入 
ES 
由 此 我 们 看 到 一 个 顾客 在 系统 中 平均 停留 的 时 间 是 
讼 二 2 二 LL 
入 和 -入 Ha 一 入 
注 (i) 这 个 结果 (方程 组 (8.15)) 本 可 以 由 M/M/1( 参 见 6.6 节 ) 时 间 可 逆 性 的 一 
个 直接 推论 得 到 . 因为 时 间 可 逆 性 不 仅 蕴涵 着 服务 线 1 的 输出 过 程 是 泊 松 过 程 , 而 
且 也 蕴涵 着 (第 6 章 的 习题 26) 服务 线 1 中 的 顾客 数 独立 于 过 去 从 服务 线 1 离开 的 
顾客 数 . 因为 这 些 过 去 从 服务 线 1 离开 的 顾客 组 成 了 服务 线 2 的 到 达 过 程 , 所 以 随 
之 可 得 两 个 系统 中 顾客 数 的 独立 性 . 
( 边 由 于 一 个 泊 松 到 达 者 看 到 时 间 平 均 , 所 以 在 一 个 一 前 一 后 的 排队 系统 中 , 一 
个 到 达 者 (在 服务 线 1) 在 两 条 服务 线 中 看 到 的 顾客 数 是 相互 独立 的 随机 变量 . 然 
而 , 应 该 注意 到 , 这 并 不 能 推出 某 一 位 顾客 在 两 条 服务 线 的 等 待 时 间 是 独立 的 . 作为 
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反例 , 假设 入 相对 于 ju = ja 非常 小 , 因此 几乎 所 有 的 顾客 在 两 条 服务 线 的 队列 中 
都 无 需 等 待 , 然而 , 假设 在 服务 线 1 的 队列 中 顾客 的 等 待 时 间 为 正 , 它 在 服务 线 2 队 
列 的 等 待 是 正 的 概率 至 少 为 1/2( 为 什么 ) 因此 , 在 队列 中 的 等 待 时 间 不 是 独立 的 . 
然而 , 值得 注意 的 是 , 一 个 到 达 者 在 两 个 服务 线 停留 的 总 时 间 (就 是 说 , 服务 时 间 加 
上 在 队列 中 的 等 待 时 间 ) 确实 是 独立 的 随机 变量 . 

上 面 的 结果 可 以 作 实质 性 的 推广 ， 为 此 考虑 拥有 条 服务 线 的 系统 顾客 按 
速率 为 i 的 独立 泊 松 过 程 从 系统 外 面 到 达 服 务 线 ii = 1,…,k, 然后 他 们 进入 服 
务 线 i 前面 的 队列 直至 轮 到 他 们 接受 服务 . 一 旦 一 个 顾客 结束 了 服务 线 i 的 服务 ， 
他 就 以 概率 Pi; 进入 服务 线 7 前 面 的 队列 , j = 1,…,k. 因此 , 并 4 Pi < 1, 而 且 
1 一 沁 *_, Py 表示 一 个 顾客 在 结束 服务 线 i 的 服务 后 离开 系统 的 概率 . 

如 果 我 们 以 ; 记 顾 客 到 服务 线 ; 的 总 到 达 率 , 那么 和 ; 可 以 作为 


大 
N=7+ NPs 11 (8.17) 
i=1 


的 解 得 到 . 方程 (8.17) 成 立 是 由 于 六 是 由 系统 外 面 到 j 的 顾客 的 到 达 率 , 而 和 i 是 
顾客 离开 服务 线 i 的 速率 (进去 的 速率 一 定 等 于 出 来 的 速率 ), 和 Pi; 是 从 服务 线 i 到 
达 服 务 线 7 的 速率 . 

这 表明 在 每 个 服务 线 的 顾客 数 确定 是 独立 的 , 而 且 具 有 形式 

oe A 
Pfn 个 顾客 在 服务 线 放 = ( 立 】 (1 更)， n>1 
其 中 必 是 在 服务 线 j 的 指数 服务 速率 , 和; 是 方程 (8.17) 的 解 ， 当然 ,必须 对 
一 切 j 都 有 和 j/1; < 1， 为 了 证 明 这 一 点 ,首先 注意 它 等 价 于 断定 极限 概率 为 
P(na,na，……,mk) = P{fnj 人 在 服务 线 j,j = 1 ……, 有 ,其 中 ， 
a 大 入 nj 入 
P(niyna，……,nk) = 1 人 人 一 包 ) (8.18) 

它 可 以 通过 证 明 它 满足 模型 的 平衡 方程 组 来 验证 . 

人 


= 和 二 的 平均 数 = Pe 


(x 

一 个 顾客 在 系统 中 停留 的 平均 时 间 可 以 由 工 = 和 AW( 其 中 入 = 人 _17j) 得 到 . (为 什 
么 不 是 入 = 4_1 和 y?) 这 就 得 到 

ZN 一 


W= 天 
| 
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注 方程 (8.18) 具体 表达 的 结果 相当 不 平凡 , 它 表明 在 服务 线 i 顾客 数量 的 分 布 与 
具有 速率 X 和 jii 的 M/M/1 系统 是 一 样 的 . 不 平凡 之 处 在 于 , 在 网 络 模型 中 结 点 i 
处 的 到 达 过 程 不 一 定 是 泊 松 过 程 . 因为 , 如 果 一 个 顾客 有 可 能 访问 一 个 服务 线 不 只 
一 次 (这 种 情形 称 为 反馈 ), 到 达 过 程 将 不 再 是 泊 松 过 程 . 解释 它 的 一 个 简单 例子 是 ， 
假设 有 一 个 相对 于 从 外 界 到 达 率 而 言 有 非常 大 的 服务 率 的 一 条 单 服务 线 , 再 假设 一 
个 顾客 在 服务 完成 后 以 概率 p = 0.9 返回 系统 . 因此 , 在 一 个 到 达 的 时 刻 之 后 很 短 
的 时 间 内 就 会 有 另 一 个 到 达 者 ( 即 反 馈 者 ) 到 达 的 概率 很 大 , 尽管 在 任意 一 个 时 间 
点 只 有 非常 微小 的 机 会 有 一 个 到 达 者 即刻 出 现 (因为 和 非常 小 ). 这 时 , 到 达 过 程 不 
是 独立 增 量 过 程 , 从 而 不 可 能 是 泊 松 过 程 . 

于 是 , 我 们 看 到 , 当 容许 有 反馈 时 , 在 给 定 站 点 的 顾客 数 的 稳 态 概率 与 M/M/1 
模型 相同 , 即使 这 个 模型 不 是 MA/M/1，( 候 设 站 点 中 两 个 不 同 的 时 间 点 的 顾客 数 的 
联合 分 布 与 M/M/1 系统 是 不 同 的 .) 

例 8.8 ”考虑 一 个 拥有 两 条 服务 线 的 系统 , 顾客 从 系统 外 部 以 速率 为 4 的 泊 松 过 程 
到 达 服务 线 1, 而 以 速率 为 5 的 泊 松 过 程 到 达 服 务 线 2. 服务 线 1 和 服务 线 2 的 服 
务 速率 分 别 是 8 和 10. 在 完成 服务 线 1 服务 的 一 个 顾客 等 可 能 地 到 服务 线 2 或 高 
开 系统 (就 是 说 Pll = 0, Pa = 1/2); 然而 从 服务 线 2 的 离开 者 , 25% 的 人 去 服务 线 
1, 其 他 人 将 离开 系统 (就 是 说 , PB1 = 1/4, Py = 0). 试 确定 极限 概率 二 和 W. 

解 ” 到 服务 线 1 和 服务 线 2 的 总 到 达 率 ( 记 成 X 和 Xo ) 可 以 由 方程 (8.17) 得 到 . 
即 我 们 有 1 

和 一 4 十 2， =5+aA 


a N=6, h=8 
i Pf{n 个 顾客 在 服务 线 1, m 个 顾客 在 服务 线 2} 
-人 全 
-大 人 全 
Lt -" w==3 下 
8.4.2 ”封闭 系统 


在 8.4.1 节 中 描述 的 系统 , 称 为 开放 系统 , 因为 顾客 可 以 进入 和 离开 系统 . 一 个 
新 的 顾客 决 不 进入 , 且 现 有 的 顾客 绝 不 离开 的 系统 , 称 为 封闭 条 统 . 

假设 有 m 个 顾客 在 上 条 服务 线 之 间 移 动 , 其 中 在 服务 线 i 的 服务 时 间 是 速率 
为 yi 的 指数 随机 变量 , i = 1,…,k. 当 一 个 顾客 完成 了 在 服务 线 i 的 服务 后 , 以 概 


430 第 8 章 排队 理论 


率 Pi 加 入 服务 线 7 前 面 的 队列 , = 1,…,k, 其 中 假设 对 于 一 切 i = 1 …… 有 
志和 P = 1. 就 是 说 , 已 = (Py) 是 一 个 马尔 可 夫 转移 矩阵 , 我 们 将 假定 它 是 不 可 
约 的 . 以 r = (Tm,…, Tk) 记 这 个 马尔 可 夫 链 的 平稳 概率 , 即 r 是 


大 大 
=》mnPi， Dn=1 (8.19) 
气 a 


的 唯一 正解 . 
如 果 我 们 记 在 服务 线 7 的 平均 到 达 率 (或 等 价 地 , 平均 服务 完成 率 ) 为 和 (7),j = 
1 那么 , 类 似 于 方程 (8.17), Xm(7) 


Am(j) = So (Ps 


因此 , 由 方程 (8.19) 我 们 可 以 得 到 结论 
nm)= 和 nn， j=1,2,.,k (8.20) 
其 中 
Mm = MnO) (8.21) 
j=1 
从 方程 (8.21) 我 们 看 到 , Am 是 整个 系统 的 平均 服务 完成 速率 , 即 指数 系统 的 吞吐 
速率 @， 
如 果 我 们 以 Pn (n,n2,… ,nx) 记 极限 概率 
Pm(ni,n2,… ,nk) = P{ni 个 顾客 在 服务 线 j,j = 1,…,k} 
那么 , 通过 验证 它们 满足 平衡 方程 , 可 以 证 明 


mj) Si 
| Ca 芷 (5 . 者 人 wm 


0， 其 他 
但 是 , 由 方程 (8.20) 我 们 得 到 
1 


让) 
Pn(nnaeee ng)=4 i/ (8.22) 


其 中 


@ 我 们 正 是 用 记号 和 rm (j) 和 Am 来 表明 在 封闭 系统 中 对 顾客 数 的 依赖 性 . 它 将 用 于 我 们 下 面 的 
递 推 关系 中 . 
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大 -1 
o.-| 沁 Tom] (8.23) 


方程 (8.22) 并 不 像 我 们 通常 假设 的 那么 有 用 , 因为 为 了 使 用 它 , 我 们 必须 知道 由 方 
程 (8.23) 给 出 的 归 一 化 常数 Cm, 它 要 求 对 于 乘积 [I?_1 (7j/13)” 在 一 切 可 行 的 向 
其 (misn2,…,n4) (可 inj =m) 上 求 和 . 因此 , 由 于 一 共有 (" tk) 个 向 量 , 这 只 
在 m 和 大 取 相 对 小 的 值 时 在 计算 上 才 可 行 . 
我 们 现在 介绍 一 个 方法 , 它 可 以 使 我 们 能 够 递 推 地 确定 模型 中 许多 重要 的 量 ， 
而 不 必 先 计算 归 一 化 常数 . 首先 考虑 顾客 刚 离开 服务 线 i 并 正 朝服 务 线 j 走 去 , 我 
们 确定 这 个 顾客 看 到 的 系统 的 概率 . 特别 地 , 我 们 确定 在 这 个 时 候 该 顾客 看 到 m 个 
顾客 在 服务 线 ! 的 概率 , 其 中 ! = 1,…,k, 学 Lim = m 一 1. 这 完成 如 下 : 
P{ 顾 客 看 到 m 个 人 在 服务 线 ,1 = 1,… ,| 顾客 从 服务 线 i 到 服务 线 j]} 
_ P{ 状 态 为 (n0… ,ni 十 ln snk), 顾客 从 i 到 让 
P{ 顾 客 从 i 到 四 
Pm(n1, nit Ly, nj nk) Pi 
Dn:y,, =m-1 Pm(nee nit ,nk) piPiy 


4 (Ll 由 方程 (8.22) 


大 
=cIIw/)™ 
j=1 


其 中 C 不 依赖 于 ni,n2,…, nw. 但 是 因为 上 式 是 在 向 量 (n,n2,…, nk) ( 并 人-ni = 
m1) 上 的 一 个 概率 密度 , 因此 从 方程 (8.22) 推出 , 它 一 定 等 于 忆 -i(navna' nt， 
因此 

P{ 顾 客 看 到 ni 个 人 在 服务 线 1,1=1,…,| 顾客 从 服务 线 i 到 服务 线 让 


k (8.24) 
= Pm-i(n1,.* ,nk), Dm=m-1 
i1 


因为 (8.24) 对 于 一 切 i 都 正确 , 从 而 我 们 已 经 证 明了 如 下 以 到 达 定理 知名 的 命题 . 
命题 8.3( 到 达 定理 ) ”在 有 m 个 顾客 的 封闭 条 统 中 , 到 达 服 务 线 j 的 到 达 者 所 看 
到 的 系统 的 分 布 与 只 有 m 一 1 个 顾客 的 同样 的 网 络 系统 的 平稳 分 布 相同 . 

用 Lm(j) 与 Wm(j) 分 别 记 在 网 络 中 有 m 个 顾客 时 在 服务 线 j 的 平均 顾客 数 
与 一 个 顾客 在 服务 线 j 停留 的 平均 时 间 . 对 一 个 到 达 的 顾客 所 看 到 的 在 服务 线 j 的 
顾客 的 人 数 取 条 件 , 推出 
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1 十 Em[ 一 个 到 达 的 顾客 所 看 到 的 在 服务 线 j 的 顾客 数 ] 


Wm(j)= 
- 性 (8.25) 


1+Lm-1()) 
bi 
其 中 最 后 的 等 式 由 到 达 定 理 得 到 . 现在 当 有 m 一 1 个 顾客 在 系统 中 时 , 由 方程 (8.20)， 
顾客 到 服务 线 7 的 到 达 率 和 -1(j) 满足 
Mm-1(j) = Am-175 


现在 , 以 在 系统 中 的 m 一 1 个 顾客 中 在 服务 线 j 的 每 人 每 单位 时 间 付 1 元 的 价格 规 
则 , 应 用 基本 价格 恒等式 (8.1), 我 们 得 到 


Lm-1(j) = Am-1TWm-1()) (8.26) 
利用 方程 (8.25) 导出 
Wn(j) = 二 Demo 全 (8.27) 
Le 
再 利用 事实 避 ?_1 Lm-1(j) =m 一 1 (为 什么 ), 我 们 从 方程 (8.26) 得 到 
大 
m—1= M1 DTWm-1()) 
i=1 
从 而 7 一 1 
mt FE el 
因此 , 由 方程 (8.27), 我 们 得 到 递 推 公式 
Wa) = 24 = Dr Wn-10) 


De mm- 人 
从 平稳 概率 ,j= 1,… ,kk 和 Wi(j) = 1/p 开始 , 我 们 可 以 用 方程 (8.29) 递 推 地 确 
定 Wa(7,Was()，…,Wm(j). 然后 利用 方程 (8.28) 确定 吞吐 率 Am, 通过 方程 (8.26) 
确定 Lm(j). 这 样 的 递 推 方法 , 称 为 平均 值 分 析 . 
例 8.9 ”考虑 有 条 服务 线 的 网 络 , 其 中 的 顾客 以 循环 排列 的 方式 移动 . 妈 
Piti=l, ii=12 -1 Pa=1l 
在 系统 中 有 两 个 顾客 时 , 我 们 确定 在 服务 线 j 的 平均 顾客 数 . 现在 , 对 于 这 个 网 络 
mi=1/k, i=1,.…,k 
又 因为 4 
WO)= 一 
Hi 
由 方程 (8.29) 得 到 
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1 (WAY) 1 1 


W2(0) = 和 
0 EN) + Ei 


因此 , 由 方程 (8.28)， 
2 2k 


m0 (+) 
lk Nn Wi 
最 后 , 由 方程 (8.26)， 


1 1 
2 [i 更 a) 
1 1 
总 (Cs E RE ie) 
认 知 由 方程 (8.22) 表述 平稳 概率 并 巧妙 地 避 开 计算 常数 Cm 的 计算 困难 的 另 
一 个 方法 是 利用 4.9 节 的 吉 布 斯 抽样 生成 具有 这 些 平稳 概率 的 马尔 可 夫 链 . 首先 注 
意 因为 总 有 m 个 顾客 在 系统 中 , 方程 (8.22) 可 以 等 价 地 写 为 在 服务 线 1,…,k 一 1 
中 顾客 数 的 联合 质量 函 数 如 下 : 


L2(j) = Mi Wa) = 


大 -1 


Pan nyt)= Cm(re/pr)™ TE™ IT/p3)™ 
j=1 


大 一 1 大 
= 天 TIId)”， Dnsm 
j=1 


一 | j=1 


其 中 四 = 了 ke =1,.…,k 一 1 现在, 如 果 N = (Ni,…, Nh-1) 有 上 述 的 联合 分 


P{N =n|Ni = na Ni = ny Nin = mit Nk-i = np-1} 
ji Pn (nl Min Nitls Nk-1) 
Dr Pn(na Mi rT Ni Nk-1) 
= Ca?, ngm-— > nj 
由 上 式 推出 ,我 们 可 以 利用 吉 布 斯 抽样 法 生成 具有 极限 概率 质量 函数 Pr 
(ni… ,ng-1) 的 马尔 可 夫 链 的 值 如 下 : 
() 令 (nu,… ,nn-1) 是 满足 -ini < m 的 任意 非 负 整 数 . 
(2) 生成 一 个 在 1,…,k 一 1 中 等 可 能 地 取 值 的 随机 变量 I. 
(3) 如 果 了 =i, 令 s=m 一 学 jyinj, 并 且 生 成 一 个 具有 概率 质量 函数 为 
P{X=n}=Caf, n=0,.…,s 


的 随机 变量 X 的 值 . 
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(4) 令 ni = 六. 然后 回 到 第 2 步 . 
状态 向 基 (m,…,ns-1,m 一 本! nj) 的 相继 值 构成 一 个 具有 极限 分 布 P, 的 马 
尔 可 夫 链 的 状态 序列 . 我 们 感 兴趣 的 一 切 量 都 能 由 这 个 序列 估计 得 到 .例如 , 这 些 
向 二 的 第 个 坐标 值 的 平均 趋 于 在 服务 站 ; 的 平均 人 数 , 第 j 个 坐标 小 于 7 的 向 二 
的 比例 趋 于 在 服务 站 j 的 人 数 少 于 的 极限 概率 , 以 此 类 推 

另 一 些 重要 的 量 也 可 以 通过 模拟 得 到 .例如 , 假设 我 们 要 估计 一 个 顾客 在 每 次 
访问 中 在 服务 线 ;停留 的 平均 时 间 Wi. 那么 , 如 前 所 记 , 在 服务 线 ; 的 平均 顾客 数 
三 可 以 估计 得 到 . 为 了 估计 W;, 我 们 用 恒等式 

Lj = NW 
其 中 和 是 在 服务 线 j 的 顾客 到 达 率 . 令 N) 等 于 服务 线 7 的 服务 完成 率 , 这 表明 
入 =P{ 服 务 线 7 在 忙 }yy 

利用 吉 布 斯 抽 梯 法 模拟 估计 P{ 服 务 线 j 在 忙 }, 就 导出 Wi 的 一 个 估计 . 
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8.5.1 ”预备 知识 : 功 与 另 一 个 价格 恒等式 


对 于 一 个 任意 的 排队 系统 , 我 们 定义 系统 在 任意 时 间 t 的 功 为 , 在 时 间 t 系统 
中 的 所 有 顾客 的 剩余 服务 时 间 之 和 . 例如 , 假设 有 3 个 顾客 在 系统 中 一 - 一 个 在 服 
务 的 顾客 在 他 需要 的 5 个 服务 时 间 单 位 中 已 经 用 了 3 个 时 间 单 位 , 且 两 个 在 队列 中 
的 顾客 都 有 6 个 单位 的 服务 时 间 . 那么 , 在 此 时 的 功 是 2+6+6 = 14. 以 V 记 在 系 
统 中 的 (时 间 ) 平均 功 . 

现在 回忆 基本 价格 方程 (8.1), 它 说 明 

系统 赚钱 的 平均 速率 = Xe x 顾客 所 付 的 平均 金额 

并 且 考 虑 如 下 的 价格 规则 : 每 一 个 剩余 服务 时 间 为 y 的 顾客 , 不 论 在 服务 , 还 是 在 
队列 中 , 以 单位 时 间 价 格 y 付费 . 于 是 系统 赚钱 的 速率 正 是 在 系统 中 的 功 , 所 以 由 基 


本 恒等式 可 得 
V = XeE[ 一 个 顾客 付 的 金额] 


现在 , 以 S 和 Ha 分 别 记 服务 时 间 和 一 个 给 定 的 顾客 在 队列 中 等 待 的 时 间 . 那么 ， 
因为 顾客 在 队列 中 以 单位 时 间 3 的 常数 价格 付费 , 而 在 服务 中 花费 时 间 z 以 后 以 
价格 S 一 z 付费 , 所 以 有 


S 
E[ 一 个 顾客 付 的 金额 | = 忆 [sm 只 | 区 = aa 
从 而 
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= XEISw3+ MES 和 四 


应 该 注意 上 式 是 一 个 基本 的 排队 恒等式 [ 像 方程 Ce 并 且 在 几乎 所 有 的 模 
型 中 都 成 立 . 此 外 如 果 一 个 顾客 的 服务 时 间 与 他 在 队列 中 的 等 待 时 间 相 互 独 立 (这 
是 通常 的 情形 , 但 并 不 总 是 这 样 9), 那么 由 方程 (8.30) 有 


2 1 
Vv = xplslwo+ > 


8.5.2 在 M/G/1 中 功 的 应 用 
模型 M/G/1 假定 了 : (i) 速率 和 的 泊 松 到 达 ; (i 一 般 的 服务 分 布 ; (过) 单条 
服务 线 . 此 外 , 我 们 假设 顾客 按 他 们 到 达 的 顺序 接受 服务 . 
现在 , 对 于 在 M/G/1 中 的 任意 一 个 顾客 . 
顾客 的 等 待 时 间 = 当 他 到 达 时 系统 中 的 功 (8.32) 
这 是 由 于 只 有 一 条 服务 线 之 故 (请 想 一 想 ). 对 方程 (8.32) 两 边 取 期 望 可 得 
= 每 个 到 达 者 看 到 的 平均 功 
但 是 , 由 于 是 泊 松 到 达 , 每 个 到 达 者 看 到 的 平均 功 将 等 于 系统 中 的 时 间 平 均 功 V. 因 
此 , 对 于 模型 M/G/1 有 


(8.30) 


(8.31) 


We =V 
将 上 式 与 恒等式 
V = XE[SIWe+ EE ] 
联合 起 来 得 到 所 谓 的 波 拉 泽 克 - 欣 齐 内 (Pollaczek-Khintchine) 公式 
_ _ XE[S4] 
Wo = 51 — XE[5) (8:83) 


其 中 E[S] 和 BE[S?] 是 服务 分 布 的 前 两 个 矩 , 
其 L、Le 和 W 可 以 从 方程 (8.33) 得 到 ， 
XA2E[S?] 


La = MWa = a0 ELSD 


2 

W= Wo+E[lS]= i + E[S], (8.34) 

XA2E[S2] 
2(1— AE[S]) 
注 (i) 为 了 使 上 面 的 量 是 有 限 的 , 我 们 需要 AE[S] < 1. 这 个 条 件 很 直观 , 因为 从 
更 新 理论 知道 , 如 果 服 务 线 总 是 忙 的 , 那么 离开 率 将 是 1/E[S]( 见 7.3 节 ), 为 了 保持 
这 些 有 限 , 它 必 须 大 于 到 达 率 入 

@ 有 一 个 反例 , 见 8.6.2 节 


大 = MAY = + AE[S] 
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(ii) 由 于 E[S3] = Var(S) + (E[S])2, 我 们 从 方程 (8.33) 和 方程 (8.34) 看 到 , 对 于 
固定 的 平均 服务 时 间 , 当 服务 分 布 的 方差 增加 时 , L、L@、W 和 We 全 都 增加 . 

(过 ) 另 一 个 得 到 We 的 方法 出 现 于 习题 38 中 . 
8.5.3” 忙 期 


系统 在 闲 期 (系统 中 没有 顾客 , 因此 服务 线 闲 着 ) 与 忙 期 (系统 至 少 有 一 个 顾客 ， 
因此 服务 线 忙 着 ) 之 间 交 圭 . 
我 们 以 了 和 B 分 别 记 闲 期 的 长 度 与 忙 期 的 长 度 . 因为 表示 从 一 个 顾客 离开 
且 系 统 空 着 直到 下 一 个 顾客 到 达 的 时 间 , 因此 , 由 泊 松 到 达 推出 了 是 速率 为 和 的 指 
数 分 布 , 所 以 I 
El1] = x (8.35) 


为 了 确定 E[B], 和 8.3.3 节 中 一 样 , 令 系统 为 空 的 时 间 的 长 程 比例 等 于 E[] 与 
卫 丰 +E[B] 的 比值 , 即 
-BP 
E[7] + E[B] 
为 了 计算 三 , 我 们 从 方程 (8.4) 注意 到 (从 基本 价格 方程 得 到 , 由 假设 在 服务 中 的 顾 
客 以 每 单位 时 间 1 元 的 价格 付费 ) 
繁忙 服务 线 的 平均 数 = AE[5] 
然而 , 因为 上 式 的 左边 等 于 1 一 Po (为 什么 ?), 所 以 有 
P=1- AME[S] (8.37) 


Ph (8.36) 


再 由 方程 (8.35)~(8.37) 得 到 
1/X 
1 -el5] = J+ 
从 而 
E[S] 

1— MAE[S] 

另 一 个 重要 的 基 , 是 在 一 个 忙 期 中 服务 过 的 顾客 数 CC 的 均值 可 以 由 如 下 
的 事实 计算 得 到 : 平均 地 每 E[C] 个 到 达 者 中 恰 有 一 个 到 达 者 将 看 到 系统 是 空 着 的 
( 即 忙 期 的 第 一 个 顾客 ), 因此 ， 


E[B] = 


1 
“= Ed 
又 因为 泊 松 到 达 ao = PR = 1 一 AE[9], 所 以 我 们 有 


1 
| 
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8.6”M/G/1 的 变形 


8.6.1 ”有 随机 容量 的 批量 到 达 的 M/G/1 


如 M/G/1 那样 假设 按 速率 为 和 的 泊 松 过 程 到 达 . 但 是 现在 每 次 到 达 的 不 是 
单个 顾客 , 而 是 随机 个 数 的 顾客 . 像 前 面 一 样 存在 单条 服务 线 , 它 的 服务 时 间 的 分 布 
为 G. 

以 aj(i > 1) 记 任意 一 批 中 包含 j 个 顾客 的 概率 , 以 N 表示 批 大 小 的 随机 变 
量 , 所 以 P{N = 让 = aj. 因为 Xe = 和 E[N], 功 的 基本 公式 [方程 (8.31)] 变 为 

ES 


V =AXEIN] [etsiwe 二 一休 (8.38) 


为 了 得 到 联系 V 与 We 的 第 二 个 方程, 考虑 一 个 平均 的 顾客 . 我 们 有 
他 在 队列 中 等 待 的 时 间 = 他 到 达 时 系统 中 的 功 
+ 由 他 所 在 的 那 批 引起 的 等 待 时 间 
取 期 望 , 并 且 利用 泊 松 到 达 者 看 到 时 间 平 均 的 事实 , 可 得 
We =Y+E[ 由 他 所 在 的 那 批 引起 的 等 待 时 间 ] = 了 十 E[Wa] (8.39) 


现在 , E[WB] 可 以 通过 对 那 批 中 的 人 数 取 条 件 来 计算 , 但 是 我 们 必须 小 心 , 因为 我 
们 的 平均 顾客 来 自 大 小 为 j 的 那 批 的 概率 不 是 a;. 因为 a; 是 大 小 为 j 的 批 的 比 
例 , 如 果 我 们 随机 取 一 个 顾客 , 他 来 自 较 大 一 批 的 可 能 性 要 比较 小 一 批 的 可 能 性 大 . 
( 例如 , 假设 am = aaoo = 1/2, 那么 有 半数 的 批 大 小 为 1, 但 是 顾客 的 100/101 都 来 
自 大 小 为 100 的 那 批 !) 

为 了 确定 平均 顾客 来 自 大 小 为 7 的 一 批 的 概率 , 推理 如 下 . 令 M 是 一 个 大 的 
数 , 那么 前 M 批 中 大 小 为 了 的 近似 有 Mo5 批 , 7 > 1, 于 是 近似 有 jMaij 个 顾客 在 
大 小 为 ; 的 批 到 达 . 因此 , 在 前 M 批 中 的 到 达 者 来 自 大 小 为 ; 的 那些 批 的 比例 近 


iMay i y 
似 地 是 Mo 当 M 一 co 时 这 个 比例 变 得 精确 , 所 以 我 们 有 
9 ja; _ ja 
顾客 来 自 大 小 为 7 的 批 的 比例 = 于 一 冯 和 
我 们 已 经 做 好 了 计算 由 其 他 人 在 同一 批 引起 的 在 队列 中 的 平均 等 待 时 间 E[Ws] 的 
准备 : 


EDYa] = 3 ElWsl 邓 的 大 小 为 相亲 (8.40) 
现在 如 果 在 他 的 那 批 中 有 ;j 个 顾客 , 那么 如 果 我 们 的 顾客 在 这 批 的 队列 中 是 第 i 个， 
他 将 等 待 他 们 中 的 i 一 1 个 完成 服务 . 因为 他 等 可 能 地 是 队 中 的 第 1 个 , 第 2 个 …， 
或 第 了 个 ,所 以 
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PIWs| 批 的 大 小 为 四 一 立 -Dll = eI5) 
将 它 代 入 方程 (8.40) 得 到 
Bwal= 型 周 Po- EY 
再 由 方程 (8.38) 和 方程 (8.39), 我 们 得 到 
_ EISI(EIN’] ~ EIN])/(2E[N]) + AELNJELS®]/2 


We 1— AE[NIEIS] 


注 (i) 注意 We 有 限 的 条 件 是 
XEIN] < i 

这 又 一 次 说 明 , 到 达 率 必须 小 于 服务 率 ( 当 服 务 线 忙 时 ). 

(ii) 对 于 固定 的 值 BIN], We 关于 Var(N) 递增 , 这 再 次 表明 “ 单 服务 线 排队 模 
型 不 喜欢 变化 ”. 

(ii) 其 他 的 量 L、Le 和 W 可 以 用 

W=Wa+E[lS), L=XMW=AEINW, Lo=ME[INWo 

得 到 . 
8.6.2 ”优先 排队 模型 


优先 排队 模型 是 将 顾客 分 为 类 型 , 然后 根据 他 们 的 类 型 给 予 优先 服务 的 排队 模 
型 考虑 有 两 类 顾客 , 他 们 分 别 按 速 率 为 和 和 Xz 的 独立 泊 松 过 程 到 达 , 而 且 分 别 
有 服务 分 布 G! 和 G2. 假设 第 一 类 型 的 顾客 优先 给 予 服 务 , 因此 , 若 有 一 个 第 一 类 
型 的 顾客 在 等 待 , 则 绝 不 开始 对 第 二 类 型 的 顾客 服务 . 然而 , 若 一 个 第 二 类 型 的 顾 
客 在 接受 服务 时 一 个 第 一 类 型 的 顾客 到 达 , 则 我 们 假定 这 个 第 二 类 型 的 顾客 服务 继 
续 , 直到 完成 . 就 是 说 , 一 旦 服务 开始 , 就 不 存在 优先 权 . 

以 Ws 记 一 个 第 i 类 顾客 在 队列 中 的 平均 等 待 时 间 , i = 1,2. 我 们 的 目标 是 计 
算 Ws. 1 

首先 , 注意 无 论 使 用 什么 优先 规则 , 系统 在 任意 时 刻 的 总 功 精 确 地 相同 (只 要 有 
顾客 在 系统 中 , 服务 线 总 是 忙 着 ). 这 是 因为 当 服务 线 忙 时 (无 论 谁 在 接受 服务 ), 在 
单位 时 间 内 功 总 是 以 速率 1 递减 的 , 而 且 总 是 以 一 个 到 达 者 的 服务 时 间 的 数量 为 跳 
跃 基 . 因此 , 系统 中 的 功 恰好 和 没有 优先 规则 而 是 按 先 来 先 服务 ( 称 为 FIFO) 的 次 
序 的 情形 一 样 . 然而 , 在 FIFO 下 , 上 面 的 模型 正 是 有 


入 一 Al 十 X2， G(z) = hs) + Ga(z) (8.41) 
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的 M/G/1, 因为 两 个 独立 的 泊 松 过 程 的 组 合 本 身 也 是 泊 松 过 程 , 其 速率 是 分 量 速 
率 的 和 . 服务 分 布 G 可 以 由 取 条 件 于 到 达 者 来 自 哪个 优先 类 而 得 到 一 一 如 方程 
(8.41) 所 做 . 

因此 , 由 8.5 节 的 结果 推出 , 在 优先 排队 系统 中 的 平均 功 由 

vy XE[S9] 
2(1— AE[S]) 
_ _ MQ/NE[SH] + (Ma/NE[SI]) 
2[1 — A((1/NE[S1] + (M2/NE[S2])] 
_ NE[S?] + MAE[S] 
2(1 一 XiE[S] — M2E[S2]) 
给 出 , 其 中 5; 有 分 布 Gi,i = 1,2. 

我 们 继续 探讨 寻求 Ws, 注意 在 优先 模型 中 , 服务 时 间 S 和 一 个 任意 的 顾客 在 
队列 中 等 待 的 时 间 Ws 不 是 独立 的 , 这 是 因为 关于 5 的 信息 给 了 我 们 有 关 顾 客 类 
型 的 信息 , 它 反 过 来 又 给 了 我 们 关于 W3 的 信息 . 为 了 避 开 这 一 点 , 我 们 将 分 开 计 
算 在 系统 中 类 型 1 和 类 型 2 的 功 的 平均 数量 以 V' 记 类 型 i 的 功 的 平均 数量 , 正 
如 8.5.1 节 中 那样 , 我 们 有 


Vi= NE[SIWS + 


(8.42) 


2 
ed =1,2 (8.43) 


如 果 我 们 定义 
吧 = 和 EISJWs， 叹 = 9 
那么 我 们 可 以 将 V6 解释 为 队列 中 类 型 i 的 功 的 平均 数量 , 而 V3 是 在 服务 的 类 型 i 
的 功 的 平均 数量 (为 什么 ?). 

现在 我 们 已 经 做 好 了 计算 Ws 的 准备 . 为 此 , 考虑 一 个 类 型 1 的 任意 到 达 者 . 
那么 


他 的 延迟 = 他 到 达 时 系统 中 类 型 1 的 功 的 数量 
十 他 到 达 时 在 服务 中 的 类 型 2 的 功 的 数量 
取 期 望 , 并 利用 泊 松 到 达 者 看 到 时 间 平 均 的 事实 可 得 
AE[S?] , M2E[S3] 


Wa=V +V8= NESIW + + (8.44) 
0 和 AiE[S? + A2E[S2] 
用 二 EL 十 23 人 

We = a0 — ANEI5) (4 


为 了 得 到 3, 我 们 首先 注意 , 由 于 V = V1 十 V2?, 所 以 由 方程 (8.42) 和 方程 
(8.43) 有 
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和 XiE[S? + A2E[S2] 


PS ed 2 ~ Et a :4 2 
20 — NBS — Els 一 ESJWS + MBLSal WE + 2 


一 Ha+A》XE[Sz]W3 [由 式 (8. 的 
现在 , 利用 方程 (8.45), 我 们 得 到 


NE[S?] + A2E[S2] 和 加 1 
2 1— NE[lS] — NES] 1 二 NE[S 


ls , Xmls 
学 


ME[S2]Wé = 


所 以 
ME[S?] + M2E[S3] 
2(1 — ANE[S] - ME[S2])(1 — XIE[SJ) 


注 (i) 注意 由 方程 (8.45), 使 WB 有 限 的 条 件 是 入 E[S1] < 1, 它 独立 于 类 型 2 的 
参数 . (这 直观 吗 ?) 由 方程 (8.46), 使 WB 有 限 的 条 件 , 我 们 需要 


2 
We = 


(8.46) 


和 iE[Si] + M2E[S2] < 1 


由 于 所 有 顾客 的 到 达 率 是 入 = Al 十 Na, 而 一 个 顾客 的 平均 服务 时 间 是 (和 1/ 和 )E[S1] 十 
(X2/ 和 )E[S2], 上 面 的 条 件 正 是 平均 到 达 率 小 于 平均 服务 率 . 

(ii 如 果 有 n 类 顾客 , 我 们 可 以 用 类 似 的 方式 求解 Vi,j = 1,…,n. 首先 注意 在 
系统 中 类 型 为 1,…,j 的 顾客 的 总 功 独立 于 关于 类 型 1,…,j 内 部 的 优先 规则 , 而 只 
依赖 于 它们 中 的 每 一 个 给 定 优先 于 顾客 类 型 j 十 1,…,n 的 情形 . (为 什么 这 样 ? 说 
出 理由 ) 因此 , V1 十 … 十 Vi 与 当 类 型 1,…,j 被 考虑 成 单个 类 型 工 优先 类 , 并且 类 
型 了 十 1 ,被 考虑 成 单个 类 型 了 优先 类 时 的 情形 是 一 样 的 . 现在 , 由 方程 (8.43) 
和 方程 (8.45)， 

V1 = NE[S?] + ANE[SI]E[SH 
2(1— AIE[S!]) 
其 中 


= 和 + AM = Ni+ + An, 
A No 9] Apioe 
E[5]=》 mel, El[S?] = ns E[5 和 = > Wel] 
i=1 tl i=j+1 


因此 , 由 Vi=V1i++… 十 Vi, 对 于 每 一 个 j=1,…,n, 我 人 有 V1 十 … 十 Vi 的 表达 
式 , 它们 可 以 用 来 求解 V1,…,V". 现在 我 们 可 以 由 方程 (8.43) 得 到 W3. 全 部 结果 
( 留 作 习题 ) 是 

多 ME[SH] + .+ AnE[S2] 

® 2 — NES — — NE[S)’ 


三 1 (8.47) 
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8.6.3 一 个 M/G/1 优化 的 例子 


考虑 一 个 单 服务 线 系统 , 其 中 顾客 按 束 率 为 A 的 泊 松 过 程 到 达 , 而 服务 时 间 是 
独立 的 且 具有 分 布 G， 令 p = XE[S], 其 中 5 表示 服务 时 间 随机 变量 , 并 且 候 定 
p < 1. 假设 只 要 忙 期 结束 , 服务 员 就 离开 , 直至 再 有 n 个 顾客 等 待 才 回 来 . 此 时 服 
务 员 回来 继续 服务 直至 系统 再 一 次 变 空 . 如 果 系统 的 设备 使 得 系统 中 每 个 顾客 以 每 
单位 时 间 速 率 e 的 价格 花费 , 同时 , 每 次 服务 员 回来 需 付 一 个 价格 K, 问 n(n > 1) 取 
什么 值 , 才能 使 设备 引起 的 单位 时 间 的 长 程 平均 价格 最 小 , 而 这 最 小 价格 又 是 多 少 ? 
为 了 回答 上 述 问题 , 我 们 首先 确定 对 于 只 要 有 个 顾客 在 等 待 服务 员 就 回来 的 策 
略 的 单位 时 间 平均 价格 A(n). 为 此 , 在 每 次 服务 员 回来 时 就 说 一 个 新 的 循环 开始 了 
容易 看 出 所 有 的 一 切 在 一 个 循环 开始 时 都 概率 地 重新 开始 , 因此 由 更 新 报酬 过 程 的 
理论 推出 , 着 C(n) 是 在 一 个 循环 中 引起 的 价格 , 而 T(n) 是 一 个 循环 的 时 间 , 则 
Aln) = SIC 
(nl 
为 了 确定 EIC(n)] 和 E[T(n)], 考虑 时 间 区 间 的 长 度 , 例如 , 在 一 个 循环 中 从 系统 中 
首次 有 i 个 顾客 开始 直至 以 后 首次 只 有 i 一 1 个 顾客 的 时 间 全. 所 以 , 并 ?了 是 在 
一 个 循环 中 服务 员 在 忙 的 时 间 . 加 上 直至 n 个 顾客 在 系统 中 的 附加 的 平均 闲 时 , 得 出 


EIT(n)] = DO BIN] + n/A 


现在 , 考虑 系统 处 于 当 一 次 服务 将 开始 而 且 有 i 一 1 个 顾客 在 队列 等 待 的 时 刻 . 因为 
服务 时 间 并 不 依赖 于 顾客 接受 服务 的 次 序 , 假设 服务 的 次 序 是 最 后 到 的 顾客 最 先 接 
受 服务 , 这 蕴涵 着 服务 并 不 开始 于 目前 在 队列 中 的 i 一 1 个 , 直至 这 i -1 个 是 系统 
中 仅 有 的 顾客 时 才 开 始 . 于 是 , 我 们 看 到 在 系统 中 从 i 个 顾客 到 i 一 1 个 顾客 所 用 的 
时 间 与 一 个 M/G/1 系统 从 1 个 顾客 到 系统 空 所 用 的 时 间 有 相同 的 分 布 ; 就 是 说 ， 
它 的 分 布 是 M/G/1 系统 忙 期 长 度 B 的 分 布 . (在 例 5.25 中 本 质地 利用 了 相同 的 推 
理 .) 因此 ， 


En = BIB = ?UL 


它 荀 涵 了 

_nE[S] 十 站 一 一 于 

这 65 可 +X 一 MXG 订 
为 了 确定 E[C(n)], 以 Ci 记 开 始 于 队列 中 有 i 一 1 个 而 服务 刚 开始 且 结 束 于 

这 i 一 1 个 是 系统 中 仅 有 的 顾客 的 时 间 长 度 T; 应 付 的 价格 . 于 是 K+ 学?_1 Ci 表 

示 在 一 个 循环 忙 时 部 分 应 付 的 总 价格 . 此 外 , 在 一 个 循环 的 闲 时 部 分 , 将 有 i 个 顾 

客 在 系统 中 等 待 一 个 速率 为 和 的 指数 时 间 , i = 1,…,n 一 1, 这 导致 了 期 望 价格 

c(1 十 … 十 (n 一 1))/X. 因此 ， 


E[T(n)] = (8.48) 
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lc =K+ 和 Elcd+ Se 


(8.49) 


为 了 求 E[Qi]. 考虑 长 度 Ti 的 区 间 的 开始 时 刻 , 令 Wi 为 开始 服务 时 间 加 上 系统 中 
直至 这 个 区 间 结 束 并 且 只 有 i 一 1 个 顾客 在 系统 中 为 止 所 有 到 达 (并 且 接 受 服务 ) 的 
顾客 花费 的 时 间 和 . 于 是 

Gi= (i— 1)cT;+cWi 


其 中 第 一 项 指 由 i 一 1 个 顾客 在 队列 中 在 长 度 T; 的 时 间 区 间 应 付 的 价格 . 因为 容易 
看 到 , Wi 与 在 M/G/1 系统 的 一 个 忙 期 中 所 有 到 达 的 顾客 在 系统 中 花费 的 时 间 总 和 
WP 有 相同 的 分 布 , 所 以 得 到 

EI[S] 


ECJ=G-Dei 


+ cE[Wi] (8.50) 


由 方程 (8.49), 得 到 


(n— 1)cE[S] 


BIC(n)]= K+ zz De 


+ncBE[W] 十 = 


要 n(n— 1)c p 
=K+ncElW,]+ py (+) 


= K +ncE[We] + TT 
利用 上 式 与 方程 (8.48) 联合 起 来 , 得 到 
A(n) = OD + Ac(1 — p)E[W] + Ee (8.51) 


为 了 确定 E[W], 我 们 利用 一 个 顾客 在 M/G/1 系统 中 花费 的 平均 时 间 是 
AE[S3] 
2(1—p) 
的 结果 . 然而 , 如 果 想 象 在 第 7 (7 > 1) 天 , 我 们 赚 取 等 于 M/G/1 系统 的 第 ) 个 到 达 
者 在 系统 中 花费 的 总 时 间 数 其 的 金额 , 那么 , 由 更 新 报酬 过 程 (因为 在 忙 期 结束 时 一 
切 都 概率 地 重新 开始 ) 推出 


W = We+E[S]= 


+ E[S] 


_ BE[W] 

”了 EN 

其 中 入 是 M/G/1 系统 在 一 个 忙 期 所 服务 的 顾客 数 . 因为 ELN] = 1/(1 - 由 我们 
看 到 


w 


_ AE[S1] 
(1 -DE =W= 


所 以 , 用 方程 (8.51), 我 们 得 到 


+ E[S] 
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A(n) = 


为 了 确定 的 最 佳 值 , 将 n 看 作 一 个 连续 变量 , 并 且 对 上 式 求 微分 得 到 


. -NU 六 广 浊 
Mm") = -a+ 


令 它 等 于 0, 并 求解 , 得 到 n 的 最 佳 值 为 5 


.AGE 
全 C 
而 单位 时 间 的 最 小 平均 价格 是 
4tn*) = V5AKG 二 DC+S Se 中 op 一 人 
有 趣 的 是 , 当 使 用 下 面 的 一 个 较 简 单 的 策略 时 , 我 们 能 够 离 最 小 平均 价格 很 近 . 

这 个 策略 是 : 只 要 服务 员 发 现 系统 空 无 顾客 , 她 就 离开 , 然后 在 一 段 固定 时 间 + 后 回 
来 . 在 她 每 次 离开 时 , 我 们 宣称 一 个 新 的 循环 开始 . 一 个 循环 中 忙 的 时 间 部 分 和 闲 
的 时 间 部 分 应 付 的 期 望 价格 , 都 由 在 服务 员 离开 的 时 间 t 内 到 达 的 顾客 数 N(t) 取 
条 件 得 到 , 以 T(t) 记 在 一 个 循环 期 间 应 付 的 价格 , 我 们 得 到 

N(t) 

EIC(OIN(O= K+ > ELC] + eN(O)3 
ti=1 


KMA1—p) ，cXzE[S?] c(n—1) 
n ¥ Dt Re 2 


cA2E[S?] c 


= K+ MO — DeEIS] 
站 


2(1— 
第 一 个 等 式 的 最 后 一 项 是 , 在 循环 中 闲 时 的 条 件 期 望 价格 , 它 利用 了 给 定时 间 t 内 
到 达 的 人 数 , 到 达 时 间 是 独立 的 且 在 (0,t) 上 是 均匀 分 布 ; 第 二 个 等 式 利用 了 方程 
(8.50). 因为 N(t) 是 均值 为 Mt 的 泊 松 过 程 , 由 此 推出 


EIN(O(N(t) 一 D] = ELN2(D] — EIN(D)] = X22. 
对 上 式 取 期 望 得 到 
E[C(t)]= K+ 


+ N(t)cE[Wo] + eN(0)3 


A2t2cE[S] CAt2 
50 0 十 MtcE[ 二 -7 


CAt2 
=K+ 231-7) + MtcE[W] 
类 似 地 , 若 T(t) 是 一 个 循环 的 时 间 , 则 
ET(O) = BIBT(OINON = Blt+ N(DBIB) =t+ 1 = 1 


p= 
因此 , 单位 时 间 的 平均 价格 , 记 为 A(t), 是 


7 _ BIC) _KQ- 朋 
Ee 


t | cA(1 ~ p) BIW 
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于 是 , 从 方程 (8.51) 我 们 看 到 
4(n/A) — A(n) = c/2 


这 表明 允许 依赖 于 目前 在 系统 中 的 人 数 的 回来 的 决策 可 以 简化 到 A 
金额 c/2. 


8.6.4 具有 中 断 服务 线 的 M/G/1 排队 系统 


考虑 单 服务 线 的 排队 模型 , 其 中 顾客 按 速率 为 的 泊 松 过 程 到 达 , 而 每 个 顾客 
需要 服务 的 时 间 总 基 具 有 分 布 G. 然而 , 假设 服务 线 在 运行 时 以 指数 速率 a 中 断 运 
行 . 即 一 条 在 运行 的 服务 线 能 够 在 附加 的 时 间 t 不 中 断 地 运行 的 概率 是 e-“!. 当 服 
务 线 中 断 时 , 立刻 送 至 修理 厂 . 修理 的 时 间 是 具有 分 布 互 的 随机 变 基 . 假设 当 服 务 
线 中 断 发 生 时 , 正在 服务 的 顾客 在 服务 线 重新 工作 时 从 中 断 发 生 的 那 处 继续 接受 服 
务 . (所 以 , 一 个 顾客 从 运行 的 服务 线 上 实际 接受 服务 的 时 间 总 基 具 有 分 布 G.) 

令 顾客 的 “服务 时 间 ” 包含 顾 客 等 待 被 修理 的 服务 线 重新 工作 的 时 间 , 则 上 面 
是 一 个 M/G/1 排队 系统 9 如 果 我 们 以 T 记 一 个 顾客 第 一 次 进入 服务 线 直到 离开 
系统 的 总 时 间 , 那么 , 7 是 这 个 M/G/1 排队 系统 的 服务 时 间 随 机 变 甚 . 于 是 一 个 顾 
客 在 他 第 一 次 服务 开始 前 在 队列 中 等 待 的 平均 时 间 是 

Ww = EI 
2 a21— MB) 

为 了 计算 EIT] 和 E[T3], 令 具 有 分 布 G 的 5S 是 顾客 需要 的 服务 随机 变 基 , 以 N 记 
顾客 在 服务 时 服务 线 中 断 的 次 数 , 令 Ri, Ro,… 是 相继 用 在 修理 设备 上 的 时 间 . 那么 


N 
T=DR+S 
i=]1 
取 条 件 于 3 导致 
N N 
EITIS=s=E [Sals = | +s, Var(T|S =s)= Var (> Rils 四 中 


i=1 i=1 

现在 , 一 条 正在 运行 的 服务 线 总 是 以 指数 速率 a 中 断 . 所 以 , 假定 一 个 顾客 需要 服 
务 s 个 单位 时 间 * 则 这 个 顾客 接受 服务 的 服务 线 中 断 的 次 数 是 均值 为 as 的 泊 松 随 
机 变 其 . 因此 , 取 条 件 5 = s, 随机 变量 汇 疙 1 Ri 是 具有 泊 松 均值 os 的 复合 泊 松 随 
机 变量 . 利用 例 3.10 和 例 3.19 的 结果 , 我 们 得 到 

N N 

E [Eas = | =asE[lR], Var 位 RilS= ) = asE[R?] 

‘i=1 i=1 

其 中 RR 具有 修理 分 布 也. 所 以 
@ 这 时 的 服务 随机 变量 是 下 面 定义 的 T, 它 的 分 布 不 再 是 G. 一 一 译 者 注 
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BITI5] = aSE[R] + S = S(1+aE[R]), Var(T|S) = aSE[R?] 
于 是 
EIT] = E[E[T|S]] = E[S](1 + oE[R]) 
为 由 条 件 方差 公式 
Var(T) = E[Var(T|S)] + Var(E[T|S]) = aE[S]E[R2] + (1 + ak[R])?Var(S) 
所 以 
EIT?] = Var(T) + (E[T])? = aF[S]E[R?] + (1 + aE[R])?E[S?] 
从 而 , 假定 和 E[T] = XE[5](1+aE[R]) < 1, 得 到 
MaE[S]E[R?] + 和 (1 + aE[R])?E[S?] 
2(1 — AE[S](1 + aE[A))) 


六 = 
由 上 式 导致 
Lo=MWe, W=Wat+ElT], L=AW 

我 们 还 可 能 对 其 他 一 些 量 有 兴趣 ， 

(i) Po, 服务 线 工作 的 时 间 比 例 ; 

(ii) BB., 服务 线 修理 的 时 间 比 例 ; 

( 道 ) Pi, 服务 线 闲 着 的 时 间 比 例 . 
这 些 基 都 可 以 利用 排队 价格 恒等式 得 到 . 例如 , 如 果 我 们 假设 顾客 在 实际 接受 服务 
时 , 每 单位 时 间 支 付 1, 那么 

系统 平均 赚钱 的 速率 = 已 ， 一 个 顾客 的 平均 支付 额 = E[5] 
所 以 , 由 恒等式 得 
P, = AE[5] 

为 了 确定 忆 , 假设 顾客 在 因 服 务 线 修理 而 中 断 服务 时 , 每 单位 时 间 支 付 1, 那么 


系统 平均 赚钱 的 速率 = 已 ， 
N 
一 个 顾客 的 平均 支付 额 =E[ > Ri] = oaE[SJE[R]. 
i=]1 
这 就 有 
已 = MaE[S]E[R] 
而 PP 可 以 得 自 
P=1-P,-P. 
注 量 P 和 PP 也 可 以 通过 先 注意 1- Po AE[T] 是 服务 线 或 者 在 工作 或 者 在 修 
理 的 时 间 比 例 而 得 到 . 从 而 


Ps = oye =AXE[S], P=MT 


Er] — EIS 
ED EI 


=AE[SJaE[R] 
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8.7 G/M/1 模型 


G/M/1 模型 假定 相继 到 达 之 间 的 间隔 时 间 有 一 个 任意 分 布 G. 服务 时 间 是 速 
率 为 /的 指数 分 布 , 且 只 有 一 条 服务 线 . 

分 析 这 个 模型 的 直接 困难 是 系统 中 的 顾客 数 没有 提供 样本 空间 的 足够 信息 . 因 
为 要 概括 到 目前 为 止 发 生 了 什么 , 我 们 不 仅 需要 知道 在 系统 中 的 人 数 , 而 且 还 需要 
知道 自 最 后 一 个 人 到 达 后 消耗 的 时 间 (因为 G 不 是 无 记忆 的 ). (为 什么 我 们 不 需要 
关心 正在 接受 服务 的 人 已 经 接受 服务 的 时 间 ?) 为 了 避 开 这 个 问题 , 我 们 只 考虑 有 
一 个 顾客 到 达 时 的 这 个 系统 , 所 以 , 我 们 将 Xn (n > 1) 定义 为 

Xn 三 第 nn 个 到 达 者 看 到 系统 中 的 人 数 

容易 看 出 , {Xn,n > 1} 是 一 个 马尔 可 夫 链 . 为 了 计算 这 个 马尔 可 夫 链 的 转移 概 
率 Pij, 首先 注意 , 只 要 有 顾客 在 接受 服务 , 在 任意 长 度 为 t 的 区 间 中 服务 的 次 数 是 
均值 为 ut 的 泊 松 随机 变量 , 它 之 所 以 正确 是 因为 在 相继 的 服务 之 间 的 时 间 是 指数 
随机 变 基 , 而 我 们 知道 这 使 得 服务 的 次 数 构成 一 个 泊 松 过 程 . 因此 ， 


me MM 
Piit1-i = 上 eat), j=0,1,.,i 


这 是 由 于 如 果 到 达 者 看 到 系统 中 有 i 人 , 那么 下 一 个 到 达 者 将 看 到 i + 1 减 去 已 经 
接受 了 服务 的 人 数 , 而 容易 看 出 有 j 个 已 经 接受 了 服务 的 概率 等 于 上 式 右 方 的 式 子 
(通过 对 相继 的 到 达 之 间 的 时 间 取 条件 ). 

Pio 的 公式 稍 有 不 同 ( 它 是 在 有 分 布 G 的 随机 时 间 长 度 中 至 少 发 生 ;i + 1 个 泊 
松 事件 的 概率 ), 可 以 得 自 

Po=1 = Ri 
j=0 
极限 概率 mk,k = 0,1,… 可 以 得 自 
Tk = miPir, 大 > 0， 


=1 
大 
的 唯一 解 , 在 这 种 情形 可 简化 为 
A 三 -nt et, k>1, 


eh 0 
和 (8.52) 


cc 
Dm=1 


k=0 
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(我 们 没有 包含 方程 ro = 并 xiPio, 因为 这 些 方程 中 有 一 个 是 多 余 的 .) 
为 了 求解 上 述 方程 , 让 我 们 试探 形 如 zi = cB* 的 解 . 代入 方程 (8.52) 得 到 


a ( 2 i 大 
‘oe “二 0 
oo 名 (BiH- 
=e| opt > Ei ' (8.53) 


i=k—1 


然而 


> (Bu (Cn _ 
2 a 


于 是 方程 (8.53) 简化 为 
B= 遍 3| ett(1-P)dG(t) 
0 


从 而 i 
B= | em(1 -PqG(t) (8.54) 
0 
而 常数 c 可 以 由 mk = 1 得 到 , 它 蕴 涵 
(>! 
k=0 
所 以 
c=1-p6 


因为 (mk) 是 方程 (8.52) 的 唯一 解 , 而 x = (1 一 B)B* 满足 这 个 方程 , 由 此 推出 
mk=(1-—P)B, k=0,1,... 
其 中 6 是 方程 (8.54) 的 解 . (可 以 证 明 如 果 G 的 均值 大 于 平均 服务 时 间 1/k, 则 在 
0 与 1 之 间 存 在 唯一 的 值 8 满足 方程 (8.54).) 6 的 确切 值 通常 只 能 由 数值 方法 
得 到 . 
因为 mx 是 一 个 到 达 者 看 到 上 个 顾客 的 极限 概率 , 它 正 是 在 8.2 节 中 定义 的 ok. 


因此 
ak=(1—B)B:, k>0 (8.55) 


我 们 可 以 通过 对 顾客 到 达 时 系统 中 的 人 数 取 条 件 得 到 W. 这 就 有 
W = 》 E[ 系 统 中 时 间 | 到 达 者 看 到 大 个 人 ](1 一 8)B* 


k 
二 5 人 《+1(1 -jp)Br (因为 若 到 达 者 看 到 大 个 人 ， 
站 
大 
则 它 在 系统 中 将 花费 类 十 1 个 服务 周期 ) 
只 > 了 
~ pl1-A) (HD te = tay) 
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并 且 
Woe=W Bd 


W=— a Loe=MWo= G= 厅 


出 入 
-二 = 
其 中 入 是 平均 间隔 时 间 的 倒数 . 即 
3 = | zdG(z) 


(8.56) 


事实 上 , 确切 地 按 8.3.1 节 和 习题 4 中 对 M/M/1 展示 的 同样 方式 , 可 以 证 明 
了 "是 速率 为 J(1 - B) 的 指数 随机 变量 

Ws 以 概率 1 一 8 等 于 0 
| 以 概率 6 等 于 速率 为 (1 一 B) 的 指数 随机 变量 
其 中 W* 和 Ws 分 别 是 一 个 顾客 呆 在 系统 中 和 队列 中 的 时 间 (它们 的 均值 分 别 是 
W 和 Wao). 

虽然 a = (1 一 8)B* 是 一 个 到 达 者 看 到 系统 中 有 上 个 人 的 概率 , 然而 它 并 不 等 
于 在 系统 中 有 上 大 个 人 的 时 间 比例 (因为 到 达 过 程 不 是 泊 松 过 程 ). 为 了 得 到 及 , 我 们 
首先 注意 系统 中 的 人 数 从 上 一 1 变 为 上 的 速率 , 必须 等 于 从 k 变 为 一 1 的 速率 (为 
什么 ?). 于 是 从 大 一 1 变 为 上 的 速率 等 于 到 达 速率 和 乘 以 到 达 者 看 到 系统 中 有 一 1 
个 人 的 比例 . 就 是 说 


系统 中 人 数 从 让 一 1 变 为 上 的 速率 = 和 ak-1 


类 似 地 , 系统 中 人 数 从 大 变 为 上 - 1 的 速率 , 等 于 在 系统 中 有 大 个 人 的 时 间 比 例 乘 
以 (常数 ) 服务 速率 . 就 是 说 


系统 中 人 数 从 大 变 为 上 一 1 的 速率 = Pep 
将 这 些 速率 用 等 号 连接 , 得 到 
P= A k>1 

pk 

所 以 由 方程 (8.55) 得 到 
Pe=2(1-B)r!, k21 
pk 

又 因为 Po = 1 下 愉 1 Pe, 导致 

a 

pk 


注 ”在 上 述 分 析 中 , 我 们 猜测 马尔 可 夫 链 的 平稳 概率 的 解 的 形式 Tk = cB*, 然后 将 
它 代 入 平稳 方程 (8.52) 验证 这 个 解 . 然而 , 可 以 直接 推断 马尔 可 夫 链 的 平稳 概率 都 
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是 这 样 的 形式 , 为 此 , 定义 Bi 为 马尔 可 夫 链 在 相继 两 次 访问 状态 i (i > 0) 之 间 访 
问 状态 ;+1 的 期 望 次 数 . 现在 不 难看 出 (请 你 自己 推出 它 ) 


mo=h= 记 =…=B 
现在 可 以 用 更 新 报酬 过 程 证 明 
EE[ 在 一 个 i~i 循 环 中 访问 状态 i 十 1 的 次 数 ] 上 永 
人 [在 一 个 i~i 循环 中 的 转移 次 激 ] Um 


所 以 


Mt1=Pimni=Br, i>0 
因为 Zi2omi = 1 上 式 蕴涵 了 

m=P(1-p), i>0 
G/M/1 的 忙 期 与 闲 期 

假设 一 个 到 达 者 正好 看 见 系统 是 空 的 (所 以 开始 一 个 忙 期 ) 且 以 N 记 在 这 个 忙 
期 中 接受 服务 的 顾客 数 . 由 于 (在 忙 期 的 开始 者 之 后 的 ) 第 N 个 到 达 者 也 将 看 见 系 
统 是 空 的 , 由 此 推出 N 是 (8.7 节 的 ) 马尔 可 夫 链 从 状态 0 到 状态 0 的 转移 次 数 . 因 
此 , 1/E[N] 是 让 马尔 可 夫 链 进入 状态 0 的 转移 比例 , 或 者 等 价 地 , 是 看 到 系统 空 着 
的 到 达 者 的 比例 . 所 以 
I 

同样, 因为 下 一 个 忙 期 开始 于 第 N 个 到 达 间 隔 , 由 此 推出 循环 时 间 ( 即 忙 期 和 闲 期 
的 和 ) 等 于 直至 第 N 个 到 达 间隔 的 时 间 . 换 句 话说 , 忙 期 和 闲 期 的 和 可 以 表示 为 N 
个 到 达 间 隔 时 间 的 和 . 于 是 , 若 T; 是 忙 期 开始 后 第 i 到 达 间 隔 时 间 , 则 


N 
et 如 + 其- | 
1 


= EINJE[T] (由 瓦尔 德 方程 ) 

Ep 8.57 

=- 区- 万 (8.57) 
关于 E[ 忙 期 | 和 E[ 闲 期 |] 之 间 的 第 二 个 关系 , 我 们 可 以 用 在 8.5.3 节 中 同样 的 推理 得 
到 结论 

1- 忆 = 一 BC 期 

E[ 闲 期 +E 忙 期 \ 
又 因为 Po = 1 一 和 /4, 将 它 与 式 © 57) 结合 起 来 , 我 们 得 到 
BE[ 忙 期 ] = 5: E[ 闲 期 = 稀 汪 
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考虑 由 工作 时 间 是 速率 为 和 的 独立 指数 随机 变量 的 m 台 机 器 组 成 的 一 个 系 
统 . 在 一 台 机 器 出 现 故障 时 , 立刻 送 它 到 只 有 一 个 修理 工 的 一 个 修理 站 修理 . 如果 
修理 工 有 空 , 则 马上 开始 修理 这 台 机 器 ; 否则 , 这 台 机 器 加 入 损坏 机 器 队列 . 当 一 台 
修理 完毕 后 , 它 立刻 变 成 工作 机 器 , 而 且 开 始 修理 在 损坏 机 器 队列 中 的 另 一 台 机 器 
( 当 队 列 非 空 时 ). 相继 的 修理 时 间 是 独立 随机 变量 , 具有 密度 函数 g 和 均值 


oo 
MR = | zg(z)dz. 
o 


为 了 分 析 这 个 系统 , 以 确定 一 些 其 , 例如 不 能 工作 的 机 器 的 平均 台数 和 一 台 机 
器 不 能 工作 的 平均 时 间 , 我 们 将 利用 指数 分 布 的 工作 时 间 得 到 一 个 马尔 可 夫 链 . 特 
别 地 , 以 Xn 记 紧 随 第 n 次 修复 发 生 时 机 器 出 现 故 障 的 台数 , n > 1， 现 在 如 果 
Xn = 三 i > 0, 那么 当 第 n 次 修复 刚 发 生 时 的 情况 是 , 正 要 开始 修理 一 台 机 器 , 有 i 一 1 
台 机 器 在 等 待 修理 , 并 且 有 m 一 i 台 机 器 在 工作 , 其 中 每 一 台 将 (独立 地 ) 继续 工作 
一 个 速率 为 和 的 指数 时 间 . 类 似 地 , 如 果 X,, = 0, 那么 , 有 m 台 机 器 在 工作 , 其 中 
每 一 台 将 (独立 地 ) 继续 工作 一 个 速率 为 和 的 指数 时 间 ， 从而, 有 关 这 个 系统 的 更 
早 状态 任何 信息 , 并 不 影响 在 下 一 个 修理 完成 的 时 刻 离开 工作 的 机 器 台数 的 概率 分 
布 ; 因此 , {Xn,n > 1} 是 一 个 马尔 可 夫 链 . 为 了 确定 它 的 转移 概率 已 j, 首先 假设 
i > 0. 取 条 件 于 下 一 个 修理 完成 的 时 间 长 度 R, 并 且 利用 mm 一 i 个 剩余 工作 时 间 的 
独立 性 , 对 7 了 < m 一 i 可 得 


Ps_14y=P{ 在 呈 期 间 有 j 台 故 障 } 
全 P{ 在 期间 有 了 台 故 障 |R= rjg(r)dr 


0 
到 | Co ) (1 一 erJie-s)m-7g(rjdr 
如 果 i= 0, 那么 因为 直到 有 一 台 机 器 故障 下 一 次 修理 才 开始 , 故 
两 j = 号 和 jgm-l 


以 万 (j= 0,…,m 一 1) 记 这 个 马尔 可 夫 链 的 平稳 概率 . 即 它们 是 
m—l 
DV= Dm D1 
i j=0 


的 唯一 解 . 所 以 , 在 用 显 式 确定 转移 概率 且 求解 上 述 方程 组 之 后 , 我 们 就 知道 在 修 
复 完 成 而 所 有 的 机 器 都 工作 的 比例 mo 的 值 . 如 果 所 有 的 机 器 都 在 工作 , 我 们 说 系 
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统 处 于 “ 开 ” 状态 , 否则 就 说 处 于 “ 关 ” 状态 (于 是 , 当 修 理工 闲 时 系统 处 于 “ 开 ”, 而 
当 修 理工 忙 时 系统 处 于 “ 关 ”). 因为 当 系统 回 到 “ 开 ” 时 所 有 的 机 器 都 在 工作 , 从 指 
数 随机 变 基 缺 乏 记忆 性 推出 , 系统 在 回 到 “ 开 ” 时 一 切 都 概率 地 重新 开始 . 因此 , 这 
个 “ 开 - 关 ” 系统 是 一 个 交替 更 新 过 程 . 假设 系统 刚 变 为 “ 开 ", 于 是 开始 了 一 个 新 
的 循环 , 而 令 Ri (i > 1) 是 从 这 个 时 刻 开始 的 第 i 次 修复 的 时 间 . 同样 . 以 N 记 在 
这 个 循环 中 “ 关 "” ( 忙 ) 的 时 间 内 修理 的 次 数 . 那么 “ 关 " 时 期 的 长 度 可 以 表示 为 


N 
有 =》 已 
i=1 
虽然 N 并 不 独立 于 序列 已, Ra,…, 但 容易 检验 它 是 这 个 序列 的 一 个 停 时 , 并 且 因 
此 由 瓦尔 德 方程 ( 见 第 7 章 习题 13), 我 们 有 
E[B] = EIN]E[R] = E[N]ua 
同样 , 因为 一 个 “ 开 ” 时 间 将 持续 到 有 一 台 机 器 出 现 故 障 为 止 , 而 且 因为 独立 指数 随 


机 变革 的 最 小 值 是 指数 随机 变 其 , 其 参数 是 它们 的 参数 的 和 , 由 此 推出 在 一 个 循环 
中 的 “ 开 ”( 闲 ) 的 平均 时 间 为 


E[1] = 1/(mA) 
因此 , 修理 工 在 忙 的 时 间 的 比例 Ps 满足 
Rin ELN]Aua 
?EINr + 1/(mX) 
然而 , 因为 平均 地 每 E[N] 个 完成 修理 中 的 一 个 将 使 所 有 的 机 器 工作 , 由 此 推出 
1 
"7 EIN] 
从 而 
了 和 
人 十 mo/ 
现在 集中 注意 于 一 台 机 器 , 记 它 为 机 器 1, 而 以 Pr 记 机 器 1 被 修理 的 时 间 比 
例 . 由 于 修理 工 忙 的 时 间 比例 是 Ps, 并 且 因为 所 有 的 机 器 以 相同 的 速率 发 生 故障 ， 
且 有 相同 的 修理 分 布 , 由 此 推出 


Pr= 


Ps (8.58) 


Ee 
m mrt+7ro/\ 
然而 , 机 器 1 交替 地 处 于 以 下 各 时 间 周 期 : 在 工作 、 在 队列 中 等 待 、 在 修理 .以 
Wi、Qi、5; 分 别 记 机 器 1 第 i 次 工作 的 时 间 、 第 i 次 排队 的 时 间 、 第 i 次 修理 的 时 
间 , i> 1. 那么 ,机 器 1 在 它 的 前 n 个 “工作 - 排队 - 修理 ” 的 循环 周期 中 修理 的 时 
间 比 例 是 : 

机 器 1 在 的 前 n 个 循环 周期 中 修理 的 时 间 比 例 


(8.59) 
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DS Di Si/n 
PEW ts Te Wi/nt+ TQ/nt Te S/n 
令 n 一 oo, 并 且 利用 强大 数 定律 得 到 Wi 的 平均 与 5; 的 平均 分 别 收敛 到 1/ 和 和 
HR, 由 此 得 到 


HR 
1/A+@+k 
其 中 书 是 机 器 1 的 队 时 在 队列 中 等 人 的 时 间 “利用 方程 (8.59), 上 式 给 出 


Pr= 


i 和 
或 者 , 等 价 地 , 有 号 
Q=(m— lpr— (1— wo)/X 


此 外 , 由 于 所 有 的 机 器 都 概率 地 等 价 , 由 此 推出 人 等 于 失效 机 器 在 队列 中 花费 的 平 
均 时 间 Woe. 为 了 确定 队列 中 机 器 的 平均 数 , 我 们 利用 基本 排队 恒等式 

Lo = XeWa = XeG 
其 中 Xe 是 机 器 的 平均 故障 率 . 为 了 确定 Xe, 再 次 集中 注意 于 机 器 1, 并 且 假 设 只 
要 机 器 1 在 修理 我 们 就 在 每 单位 时 间 赚 得 1. 于 是 由 方程 (8.1) 的 基本 价格 恒等式 


推出 
已 ,=miAR 
其 中 六 是 机 器 1 的 平均 故障 率 . 于 是 , 由 方程 (8.59), 我 们 得 到 
1 


mpr+ To/X 
因为 所 有 m 台 机 器 有 相同 的 故障 率 ， 二 的 竺 天 站 尖 


和 Xa = mrl 一 


它 给 出 在 队列 中 的 机 器 平均 数 为 
1 2 mm — Dua —m(1 ro)/A 
py mpR + no/\ 
由 于 在 修理 的 机 器 平均 数 是 Pp, 上 式 与 方程 (8.58) 合 起 来 说 明 不 在 工作 的 机 器 的 
平均 数 是 


TAR 十 二 


m2pR —m(l — wo)/X 
mpR + mo/ 和 
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分 析 具 有 多 于 一 条 服务 线 的 系统 大 体 上 要 比 单 服务 线 系统 复杂 得 多 . 在 8.9.1 
节 中 , 我 们 首先 讨论 不 允许 有 排队 的 泊 松 到 达 , 然后 在 8.9.2 节 中 考虑 无 穷 容量 的 
M/M/k 系统 . 对 于 这 两 种 系统 , 我 们 能 够 给 出 其 极限 概率 . 在 8.9.3 节 中 , 我 们 考虑 


L=Lo+Ps= 
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G/M/k 模型 , 这 里 的 分 析 类 似 于 (8.7 节 的 ) G/M/1, 我 们 将 用 上 个 量 来 代替 由 积分 
方程 的 解 给 出 的 单个 量 6. 我 们 在 8.9.4 节 中 以 模型 M/G/k 结束 , 不 幸 的 是 , 前 面 
(用 于 M/G/1) 的 技术 不 再 能 够 使 我 们 推导 得 到 We, 而 我 们 满足 于 一 个 近似 方法 . 
8.9.1 厄 兰 损失 系统 

损失 系统 是 一 种 排队 系统 , 其 中 到 达 者 看 到 所 有 的 服务 线 都 在 忙 时 并 不 进入 ， 
更 确切 地 说 , 他 是 系统 丢失 的 顾客 . 最 简单 的 这 种 系统 是 M/M/k 损失 系统 , 其 中 顾 
客 按 速率 为 和 的 泊 松 过 程 到 达 , 如 果 大 条 服务 线 中 至 少 有 一 条 服务 线 闲 着 , 顾客 就 
进入 系统 , 然后 花费 一 个 速率 为 4 的 指数 时 间接 受 服务 . 这 个 系统 的 平衡 方程 组 是 


状态 离开 速率 = 进入 速率 
0 AP = Pi 
1 (A+W)P = 2pP + MAP 
2 (A+2p)B = 34B + AP 
0O<i<k +ip)P= (i+l)pPrt+AP-1 
记 KR = APe-1 
经 过 改写 , 给 出 
MP = pP, 
AP = 2pP, 
MP = 34Ps, 
APi-1 = kpPe 
因此 
R=2p, 
. 
入 /AD)2 
Bn = Mm, 
Xp WD 
B= = 一 3 用， 
入 入 
i 辟 人 hh 
并 且 利用 学 i_o Pi = 1, 我 们 得 到 
ya 
P= /A i=0,1,.…,k 


Zoo(CMAHAI 
因为 E[S] = 1/0 其 中 E[S] 是 平均 服务 时 间 , 所 以 上 面 的 等 式 可 以 写成 
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= 二 i=0,1,.…,k (8.60) 
Dj=o(ME[S])/7! 
现在 考虑 服务 时 间 是 一 般 分 布 的 同样 系统 一 一 即 考虑 不 允许 排队 的 M/G/k. 
这 个 模型 有 时 称 为 厄 兰 损 失 系 统 . 可 以 证 明 (虽然 这 个 证 明 具有 更 高 水 平 ) 方程 
(8.60) ( 称 为 厄 兰 损失 公式 ) 对 这 种 更 加 一 般 的 系统 仍然 有 效 . 
注 易 见 当 上 =1 时 方程 (8.60) 成 立 . 在 此 情形 下 , L = Pi,W = E[S], 且 Xe = AP. 
应 用 工 = 和 MaW 就 得 出 


Pi = APEIS] 
由 于 己 十 只 =1, 上 式 蕴涵 了 


AEI[S] 


一 I+XE[ 可 


1 
= TF ? 


8.9.2 。”M/M/k 排队 系统 
M/M/k 无 穷 容量 的 排队 系统 可 以 用 平衡 方程 的 技巧 分 析 . 我 们 留 给 读者 去 验 
/A)’ 
让 
B=) Do 大 “二 二 
C/E 
从 上 式 我 们 看 到 , 需要 加 上 条 件 和 < kp. 
8.9.3 ”G/M/k 排队 系统 
在 这 个 模型 中 , 我 们 也 假设 有 上 条 服务 线 , 每 一 条 以 指数 速率 / 服务 . 然而 , 现 
在 我 们 允许 相继 到 达 的 间隔 时 间 有 一 个 任意 的 分 布 G. 为 了 保证 存在 一 个 稳定 的 
(或 极限 的 ) 状态 分 布 , 我 们 假定 条 件 /uc < ku, 其 中 pc 是 分 布 G 的 均值 9 
对 于 这 个 模型 的 分 析 , 类 似 于 在 8.7 节 中 介绍 的 上 = 1 的 情形 . 即 为 了 避免 妃 
踪 从 最 后 一 个 到 达 者 开始 的 时 间 , 我 们 只 看 系统 的 到 达 时 刻 . 再 一 次 , 我 们 定义 Xn 
为 第 n 个 到 达 时 刻 在 系统 中 的 人 数 , 那么 {Xm,n > 0} 是 马尔 可 夫 链 . 
为 了 推导 这 个 马尔 可 夫 链 的 转移 概率 , 注意 到 关系 
Xi=Xat+1l—Y, nF0 
其 中 区 表示 在 第 ”个 和 第 n+ 1 个 到 达 者 之 间 的 到 达 间 隔 期 间 离开 系统 的 顾客 数 . 
现在 转移 概率 Pj 可 以 计算 如 下 : 


@ 由 更 新 理论 (命题 7.1) 推出 , 顾客 按 速率 1/kG 到 达 , 而 因为 最 大 的 服务 速率 是 ky, 若 要 极限 
概率 存在 我 们 显然 需要 1/pG < kp 


证 


igk 
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情形 1: 7 > i+1 

在 这 种 情形 容易 推出 Pi; = 0. 

情形 2: j <i+1<k 

在 这 种 情形 如 果 到 达 者 看 到 系统 中 有 i 个 人 , 那么 , 因为 i < k, 新 的 到 达 者 将 
立刻 进入 系统 . 因此 , 下 一 个 到 达 者 将 看 到 j 个 人 , 如 果 在 此 到 达 间 隔 期 间 这 ;+ 1 
个 服务 中 恰 有 i+ 1 一 j 已 完成 服务 . 取 条 件 于 这 个 到 达 间 隔 时 间 的 长 度 得 出 


启 = P{ 在 一 个 到 达 间 隔 时 间 ;+ 1 人 中 有 i 十 1 一 j 已 完成 服务 } 
中 | P{i+1 人 中 有 i+1 一 j 已 完成 服务 | 到 达 间 隔 时 间 是 tjdG(t) 


0 


一 人 人 了 划 (ev) i(e dG(t) 


其 中 最 后 的 等 式 是 由 于 在 时 间 段 中 完成 服务 的 次 数 具有 二 项 分 布 . 
情形 3: i+I>7 > 大 
在 这 种 情形 求 己 ) 的 值 , 我们 先 注意 到 , 当 所 有 的 服务 线 都 忙 时 ， 离开 过 程 是 
速率 为 kj 的 泊 松 过 程 (为 什么 )， 因此 ， 再 对 这 个 到 达 间隔 时 间 的 长 度 取 条 件 ， 
Pj = P{i+1 一 j 人 离开 } 
= Pfi+1 一 了 人 在 时 间 4 离 开 }dG(t) 


oo 计 1 一 让 
-=| et Ee = 

情形 4: i+1>k>j 

在 这 种 情形 , 当 所 有 的 服务 线 都 忙 时 , 离开 过 程 是 泊 松 过 程 , 由 此 推出 直至 系统 
中 只 有 上 个 人 为 止 的 时 间 长 度 将 具有 参数 为 i+1 一 ,kp 的 俘 马 分 布 (速率 为 kk 的 
泊 松 过 程 直到 i+1 一 个 事件 发 生 的 时 间 是 以 i+1 一 ,kp 为 参数 的 伽 马 分 布 ). 首 
先 取 条 件 于 到 达 间 隔 时 间 , 然后 取 条 件 于 对 直至 系统 中 只 有 个 人 为 止 的 时 间 ( 称 
后 面 的 随机 变 基 为 Ti), 得 到 


而 = | P{ 在 时 间 t 内 有 ;+ 1 一， 人 离开 dc) 


三 全 “P{ 在 时 间 内 有 i+1 一 j 人 离开 [Ti = suerwsCkus) 一 dsdcdb) 
0 Jo 起 一 及 )! 
ee (J) dd 

-| 上 ($)a-e pes))k-i (ert—s) kpe—k ddcg 


其 中 最 后 的 等 式 是 由 于 在 时 间 s 接受 服务 的 上 个 人 中 , 到 时 间 t 为 止 完成 服务 的 人 
数 是 具有 参数 上 和 1 一 e (4 *) 的 二 项 分 布 . 
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现在 我 们 可 以 直接 代入 方程 xj = 并 ;miP5, 或 者 用 8.7 节 结 尾 处 在 注 中 介绍 的 
同样 推理 , 验证 这 个 马尔 可 夫 链 的 极限 概率 具有 形式 


Nk1+i 一 cD1， j=0,1,.… 
将 它 代入 7j = 沁 ; miPi 中 的 任意 方程 , 在 了 > 时 得 到 8 由 
B= erknt0-p)dG 人 
o 


的 解 给 出 . 
值 wo,m,…, mk-2 可 以 由 递 推 地 求解 稳 态 方程 的 前 上 一 1 个 得 到 , 而 可 以 利 
用 二 om = 1 算得 . 


如 果 我 们 以 ra 记 一 个 顾客 在 队列 中 花费 的 时 间 , 那么 正如 G/M/1 同样 的 方 
式 , 我 们 可 以 证 明 


大 一 1 cB 
0， 以 概率 >"m =1 一 了 万 
we i i=0 


Exp(ku(1 8)， 以 概率 > = 了 5 
i=k 


其 中 Exp(kp(1 - 6)) 是 一 个 速率 为 kp(1 一 6) 的 指数 随机 变量 . 
8.9.4 M/G/K 排队 系统 


本 节 我 们 讨论 M/G/k 系统 , 其 中 顾客 以 泊 松 速率 和 到 达 , 且 由 条 服务 线 中 
的 任意 一 条 提供 服务 , 每 一 条 服务 线 具 有 服务 分 布 G. 如 果 我 们 试图 对 M/G/k 系 
统 作 仿照 在 8.5 节 中 介绍 的 分 析 , 那么 , 我 们 将 从 基本 恒等式 


V = XE[S]We + ME[S?]/2 (8.61) 


开始 , 并 且 尝 试 推导 联系 V 与 We 的 第 二 个 方程 . 

现在 如 果 我 们 考虑 一 个 任意 的 到 达 者 , 那么 我 们 有 以 下 的 等 式 

顾客 到 达 时 系统 中 的 功 = kx 顾客 在 队列 中 花费 的 时 间 +R (8.62) 
其 中 已 是 在 顾客 到 达 的 时 刻 系统 中 所 有 其 他 在 服务 的 顾客 的 剩余 服务 时 间 之 和 . 

得 到 上 式 是 因为 当 到 达 者 在 队列 中 等 候 时 , 功 是 以 单位 时 间 速率 上 产生 的 ( 因 
为 所 有 的 服务 线 都 在 忙 ). 于 是 , 当 他 在 队列 等 候 时 , 产生 了 一 个 数量 为 kx (在 队列 
的 时 间 ) 的 功 . 现在 , 当 他 到 达 时 产生 了 所 有 这 样 的 功 , 另外 , 当 他 接受 服务 时 仍旧 
在 接受 服务 那些 人 的 剩余 功 也 在 他 到 达 时 产生 了 一 一 所 以 我 们 得 到 了 方程 (8.62). 
作为 一 个 例子 , 假设 共有 3 条 服务 线 , 当 顾客 到 达 时 , 它们 全 都 在 忙 . 另外 假设 , 在 
系统 中 没有 其 他 顾客 , 而 3 个 在 服务 的 人 的 剩余 服务 时 间 是 3、6 和 7. 因此 , 到 达 
者 看 到 的 功 是 3+6+7 = 16. 现在 到 达 者 将 在 队列 中 等 待 3 个 时 间 单位 , 而 当 他 进 
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入 服务 , 其 他 两 个 顾客 的 剩余 服务 时 间 是 6 一 3 = 3 和 7 一 3 = 4, 而 作为 方程 (8.62) 
的 一 个 验证 , 我 们 看 到 16 = 3 x 3 十 7. 
对 方程 (8.62) 取 期 望 , 并 且 利用 泊 松 到 达 看 到 时 间 平 均 的 事实 , 我 们 得 到 
V = kWo + E[R] 


它 与 方程 (8.61) 一 起 , 如 果 能 够 计算 E[R], 就 能 解 出 Wo. 然而 没有 计算 EIR] 的 已 
知 方法 , 事实 上 , 没有 计算 Wo 的 已 知 确切 公式 . 在 参考 文献 6 中 , 利用 上 面 的 方法 
然后 再 逼近 PE 以 得 到 Ta， 


MAE[S?](ELS])e-: 
Wo 站 (8.63) 
2 = Dk = Els | 区 + Sey 


当 服 务 分 布 是 伽 马 分 布 时 显示 , 上 面 的 近似 已 经 与 We 非常 接近 . 当 G 是 指数 分 布 
时 , 它 也 是 精确 的 . 


习 题 


1. 对 于 M/M/1 排队 系统 , 计算 
(a) 在 一 个 服务 周期 到 达 顾 客 的 期 望 数 . 

(b) 在 一 个 服务 周期 没有 顾客 到 达 的 概率 . 
提示 :“ 取 条 件 ”. 

“2. 工厂 中 的 机 器 以 每 小 时 6 台 的 指数 速率 发 生 故 障 . 设 有 一 个 修理 工 , 他 以 每 小 时 8 台 的 指 
数 速率 修复 . 当 机 器 停止 工作 失去 生产 能 力 时 会 引起 每 小 时 每 台 机 器 10 美元 的 费用 . 问 由 
于 机 器 故障 而 招致 的 平均 费用 率 是 多 少 ? 

3. 市场 经 理 要 么 雇用 玛丽 要 么 雇用 艾 丽 斯 . 玛丽 以 每 小 时 20 个 顾客 的 指数 速率 服务 , 以 每 小 
时 3 美元 的 价格 被 雇用 . 艾 丽 斯 以 每 小 时 30 个 顾客 的 指数 速率 服务 , 以 每 小 时 C 美元 的 
价格 被 雇用 . 经 理 估计 , 平均 地 每 个 顾客 的 时 间 每 小 时 值 1 美元 , 且 应 该 将 这 计 入 模型 . 如 
果 顾 客 按 每 小 时 10 个 的 泊 松 速率 到 达 , 那么 
(a) 雇用 玛丽 每 小 时 的 费用 是 多 少 ? 雇用 艾 丽 斯 呢 ? 

(b) 求 C, 使 得 雇用 玛丽 每 小 时 的 费用 与 雇用 艾 丽 斯 一 样 

4. 对 于 M/M/1 系统 , 设 某 顾 客 在 接受 服务 前 排队 等 待 的 时 间 为 z > 0. 

(a) 证 明 这 种 情况 下 ， 当 该 顾客 到 达 时 ， 系 统 中 的 其 他 顾客 数 的 分 布 是 1 + P, 其 中 P 
是 均值 为 和 的 泊 松 随机 变量 . 
(b) 令 Wa 表示 M/M/1 系统 中 顾客 排队 等 待 的 时 间 . 作为 (a) 分 析 的 附带 结果 , 证 明 


TS 若 z=0 
条 


1- 和 +AG -ots)， 荐 z >0 
hk 
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5。 从 习题 4 推出 , 如 果 在 M/M/1 模型 中 , Ha 记 一 个 顾客 在 队列 中 等 待 的 时 间 , 那么 


10. 


和 


0， 以 概率 1 一 和 
Wa= 人 
Exp( 一 为， 以 概率 


其 中 Exp(k 一 入 ) 是 一 个 速率 为 一 和 的 指数 随机 变 荆 . 利用 它 求 Var(W6). 


“6. 证 明 具有 到 达 率 和 和 服务 率 2y 的 模型 M/M/1 中 的 W, 小 于 在 具有 到 达 率 和 和 相同 服 


务 率 / 的 2 条 服务 线 模型 M/M/2 中 的 W. 
你 能 对 此 结果 给 出 一 个 直观 的 解释 吗 ? 该 结果 对 Woe 也 成 立 吗 ? 


.考虑 如 例 8.7 中 所 介绍 的 带 有 焦躁 顾客 模型 的 排队 系统 M/M/1. 利用 极限 概率 PP (n > 0) 


给 出 你 对 下 面 问题 的 解答 . 

(a) 一 个 顾客 在 排队 系统 中 平均 停留 的 时 间 是 多 少 ? 

(b) 若 以 en 记 在 一 个 顾客 到 达 时 , 看 到 系统 中 有 n 人 的 概率 , 求 en,n > 0. 
(c) 求 到 达 且 接受 服务 的 顾客 看 到 排队 系统 中 有 n 人 的 条 件 概率 . 

(d) 求 接受 服务 的 顾客 在 系统 中 的 平均 停留 时 间 . 

(e) 求 在 接受 服务 前 离开 的 顾客 在 系统 中 的 平均 停留 时 间 . 

-个 设备 按 速率 为 和 的 泊 松 过 程 生产 产品 ， 然 而 , 只 有 放 大 件 产品 的 货架 空间 , 所 以 当 出 
现 人 件 产品 时 就 停止 生产 . 顾客 按 速率 为 上 的 泊 松 过 程 来 到 这 个 工厂 每 个 顾客 需要 1 件 
产品 , 而 且 或 者 带 着 产品 立刻 离开 , 或 者 如 果 没有 他 要 的 产品 而 空手 离开 . 

(a) 求 空手 离开 的 顾客 比例 . 
(b) 求 在 货架 上 有 一 件 产品 的 平均 时 间 . 
(c) 求 在 货架 上 产品 的 平均 数 . 


, 7 个 顾客 在 两 条 服务 线 之 间 移动 。 在 服务 完成 后 , 结束 服务 的 顾客 进入 其 他 服务 线 的 队列 


(或 者 进入 服务 , 如 果 服 务 线 亲 着 ). 所 有 的 服务 时 间 都 是 速率 为 上 的 指数 时 间 . 求 有 j 个 顾 
客 在 服务 线 1 的 时 间 的 比例 , j = 0,…,n. 

m 个 顾客 以 下 述 方式 频繁 地 访问 一 个 单 服务 线 的 服务 站 ， 当 一 个 顾客 到 达 时 , 如果 服务 线 
闲 着 , 他 进入 服务 , 否则 就 加 入 队列 . 在 服务 完成 时 该 顾客 离开 系统 , 但 是 在 一 个 速率 为 0 
的 指数 时 间 后 回来 . 所 有 的 服务 时 间 按 速率 / 指数 地 分 布 . 

(a) 求 顾 客 进入 服务 站 的 平均 速率 . 
(b) 求 一 个 顾客 在 每 次 访问 中 在 服务 站 待 的 平均 时 间 . 

一 家 人 按 速率 1 的 泊 松 过 程 到 达 出 租车 站 点 . 如 这 家 到 达 时 发 现 有 另外 N 家 在 等 出 租车 
则 不 再 等 待 . 出 租车 按 速率 / 的 泊 松 过 程 到 达 , 若 发 现 有 AM 辆 其 他 出 租车 在 等 , 则 到 达 的 
出 租车 就 不 再 等 待 . 推导 下 述 量 的 表达 式 . 

(a) 没有 家 庭 在 等 的 时 间 比 例 . 

(b) 没有 出 租车 在 等 的 时 间 比 例 . 
(c) 有 一 个 家 庭 在 等 的 时 间 比 例 . 
(d) 有 一 辆 出 租车 在 等 的 时 间 比 例 . 
(e) 登 上 出 租车 的 家 庭 的 比例 . 
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“12. 


13, 


14. 


15. 


16. 


现在 假设 N = M = oo, 每 个 家 庭 在 寻找 另外 的 出 租车 站 点 前 等 待 速率 为 a 的 指数 时 间 ， 
每 辆 出 租车 在 空 载 离开 前 等 待 速率 为 8 的 指数 时 间 . 重 做 本 题 . 
一 个 超市 有 两 个 收银 台 , 每 个 以 速率 为 / 的 指数 时 间 运 行 . 到 达 是 按 速率 为 和 的 泊 松 过 程 . 
收银 台 以 如 下 方式 运行 ， 
(iD 一 个 队列 供 两 个 收银 台 . 
(ii) 一 个 收银 台 有 一 个 固定 收 款 员 操作 , 而 另 一 个 收银 台 由 一 个 存货 管理 员 操作 , 只 是 在 系 
统 中 有 两 个 或 两 个 以 上 顾客 时 , 他 才 马 上 开始 收 丈 只 要 管理 员 完成 了 服务 , 且 在 系统 
中 少 于 两 个 顾客 , 他 将 回 到 存货 岗位 . 
(a) 令 已 是 在 系统 中 有 n 个 人 的 时 间 比 例 . 建立 Ps 的 方程 , 并 且 求 解 . 
(b) 系统 中 的 人 数 从 0 到 1 的 速率 是 多 少 ? 从 2 到 1 的 速率 是 多 少 ? 
(c) 存货 管理 员 在 收 款 的 时 间 比 例 是 多 少 ? 
提示 : 当 系统 中 只 有 一 个 人 的 时 候 , 要 稍为 仔细 
有 两 个 顾客 在 三 条 服务 线 之 间 移 动 . 一 旦 在 服务 线 i 的 服务 完成 , 顾客 就 离开 服务 线 i, 然 
后 到 另外 两 条 服务 线 中 任意 一 条 了 闲 着 的 服务 线 .( 因 此 , 总 是 有 两 条 服务 线 忙 .) 如 果 服 务 线 
i 的 服务 时 间 是 速率 为 Jui(i = 1,2,3) 的 指数 随机 变节 ,那么 服务 线 i 闲 着 的 时 间 比 例 是 
多 少 ? 
考虑 一 个 有 两 条 服务 线 但 没有 队列 的 排队 系统 ， 有 两 种 类 型 的 顾客 . 类 型 1 顾客 以 速率 为 
和 的 泊 松 过 程 到 达 , 如 果 任意 一 条 服务 线 亲 着, 他 就 进入 系统 .类 型 1 顾客 的 服务 时 间 是 
速率 为 ju 的 指数 随机 变量 . 类 型 2 顾客 以 速率 为 和 2 的 泊 松 过 程 到 达 , 类 型 2 顾客 需要 同 
时 用 两 条 服务 线 , 因此 只 有 当 两 条 服务 线 都 闲 时 , 类 型 2 到 达 者 才 会 进入 系统 . 两 条 服务 线 
服务 类 型 2 顾客 所 需 的 时 间 是 速率 为 la 的 指数 随机 变量 . 一 旦 一 个 顾客 的 服务 完成 , 这 个 
顾客 就 离开 系统 
(a) 定义 状态 使 得 能 分 析 上 述 模型 . 
(b) 给 出 平衡 方程 组 . 
用 平衡 方程 组 的 解 , 求 
(e) 一 个 进入 的 顾客 在 系统 中 所 待 的 平均 时 间 ; 
(d) 被 服务 的 类 型 1 顾客 的 比例 . 
考虑 一 个 由 两 条 服务 线 4 和 B 组 成 的 序 贯 服务 系统 . 到 达 的 顾客 只 在 服务 线 4 闲 着 时 才 
进入 系统 . 如 果 一 个 顾客 进入 了 系统 , 他 立刻 接受 服务 线 4 服务 . 当 他 在 4 的 服务 完成 时 ， 
如 果 B 闲 着 , 他 去 B; 如 果 B 忙 着 , 他 就 离开 系统 . 服务 线 B 的 服务 完成 时 , 顾客 离开 系 
统 . 假定 这 个 ( 泊 松 ) 到 达 率 是 每 小 时 2 个 顾客 , 而 4 和 B 分 别 以 每 小 时 4 个 和 2 个 顾客 
的 (指数 ) 速率 服务 . 
(a) 顾客 进入 系统 的 比例 是 多 少 ? 
(b) 进入 的 顾客 接受 B 服务 的 比例 是 多 少 ? 
(e) 系统 中 顾客 的 平均 数 是 多 少 ? 
(d) 一 个 进入 的 顾客 在 系统 中 待 的 时 间 的 平均 数量 是 多 少 ? 
顾客 按 速率 为 和 = 5 的 泊 松 过 程 到 达 一 个 具有 两 条 服务 线 的 系统 . 到 达 者 看 到 服务 线 1 闲 
着 , 就 开始 在 这 个 服务 线 接受 服务 . 到达 者 看 到 服务 线 1 忙 着 , 而 服务 线 2 闲 着 , 就 进入 服 
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17. 


18. 


19. 


20. 


务 线 2 接受 服务 . 到 达 者 看 到 两 条 服务 线 都 忙 荐 就 离开 . 一 旦 一 个 顾客 接受 完了 任意 一 条 
服务 线 的 服务 , 他 就 离开 系统 . 服务 线 i 的 服务 时 间 是 速率 为 vi 的 指数 分 布 , 其 中 种 = 4， 
kp2 = 2. 

(a) 一 个 进入 的 顾客 在 系统 中 待 的 时 间 的 平均 数量 是 多 少 ? 

(b) 服务 线 2 在 忙 的 时 间 比 例 是 多 少 ? 

顾客 按 每 小 时 2 人 的 速率 的 泊 松 过 程 到 达 一 个 具有 两 条 服务 线 的 系统 . 到 达 者 看 到 服务 线 
1 闲 着 , 就 开始 在 此 服务 线 接受 服务 . 到 达 者 看 到 服务 线 1 忙 着 , 而 服务 线 2 闲 着 , 就 开始 
在 服务 线 2 接受 服务 . 到 达 者 看 到 两 条 服务 线 都 忙 着 就 离开 ， 当 一 个 顾客 接受 完了 服务 线 
1 的 服务 , 如 果 服务 线 2 在 闲 着 , 她 将 进入 服务 线 2 接受 服务 , 如 果 服务 线 2 忙 着 她 就 离开 
系统 . 一 个 在 服务 线 2 完成 了 服务 的 顾客 将 离开 系统 . 服务 线 1 和 服务 线 2 的 服务 时 间 分 
别 是 速率 为 每 小 时 4 个 与 6 个 的 指数 随机 变量 . 

(a) 没有 进入 系统 的 顾客 比例 是 多 少 ? 

(b) 进入 的 顾客 在 系统 中 待 的 时 间 的 平均 数量 是 多 少 ? 

(c) 进入 的 顾客 接受 服务 线 1 服务 的 比例 是 多 少 ? 

顾客 以 速率 为 和 的 泊 松 过 程 到 达 一 个 具有 三 条 服务 线 的 系统 . 到 达 者 看 到 服务 线 1 闲 着， 
就 进入 服务 线 1 接受 服务 . 到 达 者 看 到 服务 线 1 忙 着 , 而 服务 线 2 闲 着 , 就 进入 服务 线 2 
接受 服务 . 到 达 者 看 到 服务 线 1 和 服务 线 2 都 忙 荐 就 离开 . 一 个 在 服务 线 1 或 服务 线 2 的 
服务 完成 的 顾客 , 或 者 进入 服务 线 3( 若 服务 线 3 闲 着 ) 或 者 离开 系统 ( 若 服务 线 3 忙 着 ). 
在 服务 线 3 的 服务 完成 后 顾客 离开 系统 .服务 线 i 的 服务 时 间 是 速率 为 iu 的 指数 随机 变 
量 , i = 1,2,3. 

(a) 定义 状态 使 之 能 分 析 上 述 系统 . 

(b) 给 出 平衡 方程 组 

(c) 用 平衡 方程 组 的 解 求 进入 的 顾客 在 系统 中 所 待 的 平均 时 间 . 

(d) 对 于 一 个 当 系统 为 空 时 到 达 的 顾客 , 求 他 由 服务 线 3 服务 的 概率 . 

经 济 情况 在 好 的 和 坏 的 时 期 之 间 轮 换 在 好 的 时 期 顾客 按 速率 为 Ni 的 泊 松 过 程 到 达 某 个 
单条 服务 线 的 系统 , 而 在 坏 的 时 期 他 们 按 速率 为 和 2 的 泊 松 过 程 到 达 . 一 个 好 的 时 期 持续 速 
率 为 a1 的 指数 时 间 , 而 一 个 坏 的 时 期 持续 速率 为 aa 的 指数 时 间 . 一 个 到 达 的 顾客 只 在 服 
务 线 闲 着 时 进入 排队 系统 , 一 个 到 达 的 顾客 看 到 服务 线 忙 着 就 离开 ， 所 有 的 服务 时 间 都 是 
速率 为 / 的 指数 随机 变量 

(a) 定义 状态 使 得 可 以 分 析 这 个 系统 . 

(b) 给 出 一 组 线性 方程 , 使 它 的 解 将 是 系统 在 各 个 状态 的 时 间 的 长 程 比例 . 

根据 (b) 中 方程 的 解 , 问 

(c) 系统 是 空 着 的 时 间 比 例 是 多 少 ? 

(d) 顾客 进入 系统 的 平均 速率 是 多 少 ? 

有 两 种 类 型 的 顾客 : 类 型 1 和 类 型 2, 分 别 以 速率 为 入 和 Xz 的 泊 松 过 程 独立 地 到 达 . 这 
里 有 两 条 服务 线 ， 如 果 服 务 线 1 闲 着 , 那么 类 型 1 到 达 者 将 进入 服务 线 1 接受 服务 ， 如 
果 服 务 线 1 忙 荐 而 服务 线 2 闲 着 , 那么 类 型 1 到 达 者 将 进入 服务 线 2 接受 服务 ， 如果 两 
条 服务 线 都 忙 着 , 那么 类 型 1 到 达 者 将 离开 .类 型 2 到 达 者 只 能 进入 服务 线 2 接受 服务 ; 
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如 果 类 型 2 顾客 到 达 时 服务 线 2 闲 着 , 那么 这 个 顾客 将 进入 这 条 服务 线 接受 服务 如果 类 
型 2 顾客 到 达 时 服务 线 2 忙 着 , 那么 这 个 顾客 就 将 离开 .在 服务 线 i 的 服务 时 间 是 速率 为 
ki(i = 1,2) 的 指数 随机 变量 . 

假设 我 们 想 求 在 系统 中 顾客 的 平均 数 . 

(a) 定义 状态 . 

(b) 给 出 平衡 方程 组 . 不 要 试图 求解 它们 . 1 

根据 长 程 概率 , 问 

(c) 系统 中 顾客 的 平均 数 是 多 少 ? 

(d) 一 个 顾客 在 系统 中 待 的 平均 时 间 是 多 少 ? 

假设 在 习题 20 中 我 们 想 求 一 个 类 型 1 顾客 在 服务 线 2 的 时 间 比 例 . 根据 在 习题 20 中 给 
出 的 长 程 概率 , 问 

(a) 类 型 1 顾客 进入 服务 线 2 的 速率 是 多 少 ? 

(b) 类 型 2 顾客 进入 服务 线 2 的 速率 是 多 少 ? 

(e) 在 服务 线 2 的 类 型 1 顾客 的 比例 是 多 少 ? 

(d) 一 个 类 型 1 顾客 在 在 服务 线 2 的 平均 时 间 是 多 少 ? 

顾客 按 速率 为 和 的 泊 松 过 程 到 达 一 个 单 服务 线 的 服务 站 . 看 到 服务 线 亲 着 的 所 有 到 达 者 都 
立刻 进入 服务 ， 所 有 的 服务 时 间 都 按 速率 上 指数 地 分 布 ， 看 到 服务 线 忙 着 的 所 有 到 达 者 将 
离开 系统 , 并 以 速率 为 9 的 指数 时 间 闲 游 后 回来 当 顾客 闲 游 回 来 ， 而 服务 线 仍 在 忙 着 , 那 
么 这 个 顾客 会 再 次 以 速率 为 9 的 指数 时 间 闲 游 后 回来 . 一 个 看 到 服务 线 在 忙 , 且 有 N 个 其 
他 顾客 “在 闲 游 ” 的 到 达 者 将 离开 , 而 且 不 再 回来 . 也 就 是 说 , N 是 “在 闲 游 ”的 顾客 数 最 
大 值 

(a) 定义 状态 

(b) 给 出 平衡 方程 组 . 

根据 平衡 方程 组 的 解 , 求 

(e) 最 终 接受 服务 的 顾客 比例 . 

(d) 一 个 接受 服务 的 顾客 等 待 的 平均 时 间 . 

考虑 顾客 到 达 率 为 ,而 服务 线 的 服务 率 为 上 的 M/M/1 系统 . 然而 假设 服务 线 在 忙 的 长 
度 为 h 的 一 个 任意 区 间 , 服务 线 以 概率 ah + o(h) 损坏 并 致使 系统 关闭 . 所 有 在 系统 中 的 
顾客 都 离开 , 而 且 服务 线 修复 好 之 前 没有 另外 的 到 达 者 允许 进入 系统 ， 修 复 的 时 间 以 速率 
B 指数 地 分 布 . 

(a) 定义 合适 的 状态 . 

(b) 给 出 平衡 方程 组 . 

根据 长 程 概率 , 问 

(c) 进入 系统 的 顾客 在 系统 中 待 的 平均 时 间 是 多 少 ? 

(d) 进入 的 顾客 完成 服务 的 比例 是 多 少 ? 

(e) 在 服务 线 损坏 期 间 到 达 的 顾客 比例 是 多 少 ? 

再 考虑 习题 23. 这 次 假设 当 服务 线 已 损坏 并 在 修理 时 , 系统 中 的 顾客 被 保留 其 中 . 另外 , 假 
设 损坏 时 期 允许 新 的 到 达 者 进入 系统 . 问 一 个 顾客 在 系统 中 待 的 平均 时 间 是 多 少 ? 


462 


第 8 章 排队 理论 


25. 


26. 


27. 


“28. 


29. 


按 参数 为 的 泊 松 过 程 到 达 的 到 达 者 加 入 具有 指数 服务 率 ja 和 Ha 的 两 条 平行 的 服务 
线 4 和 B 前 面 的 队列 ( 见 图 8.4). 当 系 统 空 着 时 , 到 达 者 以 概率 a 进入 服务 线 4, 以 概率 
1 一 a 进入 服务 线 B. 此 外 队列 中 前 面 的 人 首先 进入 空 着 的 服务 线 . 

(a) 定义 状态 并 建立 平衡 方程 组 . 不 用 求解 . 

(b) 根据 (a) 中 的 概率 , 在 系统 中 的 平均 人 数 是 多 少 ? 平均 闲 着 的 服务 线 是 多 少 ? 

(c) 根据 (a) 中 的 概率 , 一 个 任意 的 到 达 者 在 4 接受 服务 的 概率 是 多 少 ? 


一 -二 


图 8.4 


在 一 个 有 无 限 等 待 空间 的 队列 中 , 顾客 按 泊 松 过 程 (参数 和 ) 到 达 , 且 服 务 时 间 是 指 娄 分布 
(参数 人 ). 然而 , 服务 线 在 开始 服务 第 一 个 顾客 前 要 等 待 到 有 K 个 人 出 现 . 然后 , 每 次 服务 
一 个 , 直到 所 有 的 K 个 人 和 所 有 后 来 的 到 达 者 都 接受 了 服务 为 止 .这 时 服务 线 将 闲 着 , 直 
到 再 有 KK 个 新 的 到 达 者 出 现 . 
(a) 定义 合适 的 状态 空间 , 画 一 个 转移 示意 图 , 并 建立 平衡 方程 组 . 
(b) 根据 极限 概率 ， 一 个 顾客 在 队列 中 待 的 平均 时 间 是 多 少 ? 
(0) 入 和 hk 必须 满足 的 条 件 是 什么 ? 
考虑 一 个 单 服务 线 的 指数 系统 , 其 中 普通 顾客 的 到 达 率 为 ,服务 率 为 .另外 有 一 个 特殊 
的 顾客 具有 服务 率 ja。 只 要 这 个 特殊 的 顾客 到 来 , 她 直接 进入 服务 (如 果 有 其 他 人 正在 接 
受 服务 , 那么 这 个 人 将 返回 队列 ). 当 这 个 特殊 的 顾客 不 接受 服务 时 , 她 以 一 个 (平均 为 1/0 
的 ) 指数 时 间 离开 系统 . 
(a) 这 个 特殊 的 顾客 的 平均 到 达 率 是 多 少 ? 
(b) 定义 合适 的 状态 , 并 建立 平衡 方程 组 . 
(0) 求 一 个 普通 的 顾客 被 迫 返回 队列 n 次 的 概率 . 
以 DD 记 在 A < /的 平稳 M/M/1 排队 系统 中 相继 离开 之 间 的 时 间 . 取 条 件 于 一 次 离开 是 
否 使 系统 为 空 , 证明 D 是 速率 为 和 的 指数 随机 变量 . 
提示 : 取 条 件 于 一 次 离开 是 否 使 系统 为 空 ,我 们 看 到 
万 二 { 指数 (4)， 以 概率 和 A/ 

1 指数 (A) * 指数 (0)， 以 概率 1 一 和/ 
其 中 指数 (A)* 指数 (4) 表示 具有 速率 和 和 / 的 两 个 独立 的 指数 随机 变量 的 和 . 现在 用 算 
母 函数 证 明 D 有 所 希 的 分 布 
注意 上 面 并 没有 证 明 离开 过 程 是 泊 松 过 程 . 要 证 明 这 个 结论 , 我 们 不 仅 需 要 证 明 离 开间 隔 时 
间 都 是 速率 为 ^ 的 指数 随机 变革 ,而且 还 需要 证 明 它们 是 独立 的 . 
潜在 顾客 按 速率 为 的 泊 松 过 程 到 达 一 个 单个 服务 员 的 美发 沙龙 . 看 到 服务 员 亲 着 的 潜在 
顾客 将 进入 系统 , 看 到 服务 员 忙 着 的 潜在 顾客 将 离开 ， 某 个 潜在 顾客 以 概率 Pi 为 类 型 i, 其 
中 pi 二 pz 十 ps = 工 类 型 1 顾客 由 服务 员 洗 发 ,类 型 2 顾客 由 服务 员 前 发 ， 而 类 型 3 顾客 
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由 服务 员 先 洗 发 然后 剪 发 .服务 员 用 速率 为 la 的 指数 时 间 洗 发 , 且 用 速率 为 jo 的 指数 时 
间 剪 发 . 

(a) 解释 为 什么 这 个 系统 可 以 用 4 个 状态 来 分 析 . 

(b) 给 出 一 个 方程 组 , 它 的 解 是 系统 在 每 个 状态 的 时 间 比 例 . 

根据 (b) 中 方程 组 的 解 , 求 

(c) 服务 员 在 剪 发 的 时 间 的 比例 ; 4 

(d) 进入 的 顾客 的 平均 到 达 率 . 

对 于 一 前 一 后 的 排队 模型 验证 


Pam = (M1)" (1— Mp) (Mpa)™ (1 — Mua) 


满足 平衡 方程 组 (8.15). 

考虑 有 3 个 站 的 网 络 . 顾客 分 别 按 速 率 为 5、10、5 的 泊 松 过 程 到 达 站 1、2、3. 在 3 个 站 
的 服务 时 间 分 别 是 速率 为 10、50、100 的 指数 时 间 . 一 个 在 站 1 完成 了 服务 的 顾客 等 可 能 
地 (i) 去 站 2, (ii) 去 站 3, 或 者 (证 ) 离开 系统 . 一 个 离开 站 2 服务 的 顾客 总 是 去 站 3. 一 个 
离开 站 3 服务 的 顾客 等 可 能 地 或 者 去 站 2 或 者 离开 系统 . 

(a) 在 系统 中 顾客 的 平均 数 是 多 少 (包含 所 有 3 个 站 ) ? 

(b) 一 个 顾客 在 系统 中 待 的 平均 时 间 是 多 少 ? 

考虑 一 个 由 两 个 顾客 在 两 条 服务 线 之 间 移 动 的 封闭 排队 网 络 , 并 且 假 设 在 每 次 完成 服务 后 ， 
顾客 等 可 能 地 去 每 一 条 服务 线 , 即 Pi,2 = P21 = 1/2. 以 jw 记 在 服务 线 i 的 指数 服务 率 ， 
i=1,2. 

(a) 确定 每 条 服务 线 的 平均 顾客 数 . 

(b) 确定 每 条 服务 线 的 服务 完成 率 . 

解释 马尔 可 夫 链 蒙特 卡 罗 模拟 怎样 用 吉 布 斯 抽样 法 去 估计 

(a) 在 一 次 访问 中 , 在 服务 线 j 待 的 时 间 数 量 分 布 . 

提示 : 用 到 达 定 理 . 

(b) 一 个 顾客 在 服务 线 7 的 时 间 比 例 ( 即 或 者 在 服务 线 j 的 队列 , 或 者 在 服务 线 了 服务 ). 

对 于 开放 排队 网 络 

(a) 叙述 并 证 明 到 达 定 理 的 等 价 性 . 

(b) 对 于 一 个 顾客 在 队列 中 等 待 的 平均 时 间 , 推导 一 个 表达 式 . 

顾客 按 速率 和 的 泊 松 过 程 到 达 一 个 单 服务 线 站 ， 每 个 顾客 有 一 个 值 ， 顾 客 的 相继 值 是 独 
立 的 , 而 且 来 自 一 个 (0,1) 上 的 均匀 分 布 . 一 个 具有 值 x 的 顾客 的 服务 时 间 是 一 个 均值 为 
3 + 47 和 方差 为 5 的 随机 变量 

(a) 一 个 顾客 在 系统 中 待 的 平均 时 间 是 多 少 ? 

(b) 一 个 有 值 = 的 顾客 在 系统 中 待 的 平均 时 间 是 多 少 ? 

比较 M/G/1 系统 先 来 先 服务 规定 , 与 后 来 先 服务 规定 (例如 , 服务 的 单 件 是 从 一 堆 货 的 顶 
部 拿 时 )， 你 觉得 队列 的 长 度 、 等 待 时 间 和 人 忙 期 分 布 会 不 同 吗 ? 它们 的 均值 是 多 少 ? 如 果 排 
队 系 统 的 规定 总 是 在 等 待人 中 随机 地 选取 , 那么 情况 将 怎样 ? 直观 地 哪 一 种 规定 将 导致 等 
待 时 间 分 布 的 最 小 方差 ? 
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在 M/G/1 排队 系统 , 

(a) 离开 后 留 下 功 为 0 的 离开 者 的 比例 是 多 少 ? 

(b) 一 个 离开 的 顾客 离开 时 系统 中 看 到 的 平均 功 是 多 少 ? 

对 于 M/G/1 排队 系统 , 以 Xn 记 第 n 个 离开 的 顾客 离开 时 系统 中 留 下 的 人 数 . 
(a) 如 果 


人 着 Xn>1 
Xuti= 
Yn, 若 Xn =0 
Yn 表示 什么 ? 
(b) 将 上 面 改写 为 
Xnt1 = Xn 一 1 十 次 十 (8.64) 
其 中 
6 1， 若 Xn= 
” 【0 着 Xn>1 


取 期 望 , 并 在 方程 (8.64) 中 令 n 一 co 得 到 
Eléeo] = 1— AE[S] 


(c) 将 方程 (8.64) 两 边 取 平方 , 再 取 期 望 , 然后 令 n 一 co 得 到 
和 2E[S? 
2(1 — AE[S]) 
(d) 论证 一 个 离开 者 看 到 的 平均 人 数 E[Xw] 等 于 工 . 
考虑 一 个 M/G/1 排队 系统 , 其 中 在 忙 期 第 一 个 顾客 具有 服务 分 布 G1, 而 所 有 其 他 顾客 具 
有 服务 分 布 G2. 以 C 记 在 一 个 忙 期 中 的 顾客 数 , 并 且 以 5 记 随 机 选取 的 一 个 顾客 的 服务 

时 间 . 
论证 
(a) ao = Po = 1 — AE[S]. 
(b) E[S] = aoB[S1] + (1 一 ao)E[S2], 其 中 S4 具有 分 布 Gi 
(c) 用 (a) 和 (b) 证 明 一 个 忙 期 的 期 望 长 度 E[B] 由 E[B] = 
(d) 求 E[C]. 
考虑 XE[5] <1 的 一 个 M/G/1 排队 系统 . 
(a) 假设 服务 线 在 系统 中 有 n 个 顾客 的 时 刻 才 开 始 服务 ， 
(i) 论证 直至 在 系统 中 只 有 n 一 1 个 顾客 为 止 的 附加 时 间 与 忙 其 具有 相同 的 分 布 . 
(ii) 直至 系统 空 为 止 的 期 望 附加 时 间 是 多 少 ? 
(b) 假设 在 某 个 时 刻 系统 中 的 功 为 A. 我 们 想 求 直至 系统 空 为 止 的 期 望 附加 时 间 一 一 称 
它 为 BT]. 以 N 记 在 前 4 个 单位 时 间 期 间 到 达 的 人 数 . 
人 计算 EITIN]. 
后 计算 E[T]. 


ElXw] = + AE[S] 


ElSi] 
1— AE[S] 


给 出 . 
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41. 


42. 


43. 


44. 


“45. 
46. 
“47. 
48. 
49. 


载 有 顾客 的 车 按 每 小 时 4 辆 的 速率 到 达 一 个 单 服务 线 的 站 . 服务 时 间 以 速率 每 小 时 20 人 
指数 地 分 布 如果 每 辆 车 乘坐 1、2、3 个 顾客 的 概率 分 别 为 1/4、1/2、1/4. 计算 顾客 在 队 
列 中 的 平均 延迟 . 
在 8.6.2 节 的 有 两 个 类 的 优先 排队 模型 中 , Wo 是 什么 ? 证 明 如 果 E[S1] < E[Sa], 那么 Wo 
比 在 “ 先 来 先 服务 ”规定 下 的 小 , 而 如 果 E[S1] > E[S2], 那么 We 比 在 “ 先 来 先 服务 ”规定 
下 的 大 . 
在 两 个 类 的 优先 排队 模型 中 , 假设 在 队列 中 的 每 个 类 型 i 顾客 每 单位 时 间 支付 一 个 价格 
Ci,i = 1,2. 证 明 如 果 

ElS!] ElS2] 

Gi GO 

那么 类 型 1 顾客 必须 优先 于 类 型 2 顾客 (而 如 果 反 向 则 相反 ). 
考虑 在 8.6.2 节 的 有 两 个 类 的 优先 排队 模型 , 但 是 现在 假设 如 果 在 一 个 类 型 1 顾客 到 达 时 ， 
一 个 类 型 2 顾客 正在 接受 服务 , 则 这 个 类 型 2 顾客 被 暂停 服务 . 这 称 为 有 抢先 权 的 情形 . 假 
设 当 一 个 被 暂停 服务 的 类 型 2 顾客 回来 接受 服务 时 , 他 的 服务 开始 于 他 被 暂停 服务 时 留 下 
的 服务 的 地 方 . 
(a) 证 明 在 任意 时 刻 系统 中 的 功 与 无 抢先 权 的 情形 一 样 . 
(b) 推导 WS. 
提示 : 类 型 2 顾客 是 如 何 影响 类 型 1 顾客 的 ? 
(0) 为 什么 V8 = XaE[Sa]W3 是 不 正确 的 ? 
(qd) 论证 由 一 个 到 达 的 类 型 2 顾客 所 看 到 的 功 与 无 抢先 权 的 情形 一 样 , 从 而 


W8 = W3( 无 抢先 权 的 ) + [额外 时 间 ]， 


其 中 的 额外 时 间 是 由 他 可 能 被 暂停 服务 的 事实 所 引起 的 . 
(e) 以 N 记 一 个 类 型 2 顾客 被 暂停 服务 的 次 数 . 为 什么 有 


EE 额外 时 间 |N] = i 
提示 ， 当 一 个 类 型 2 的 顾客 被 暂停 时 , 将 直到 他 回来 接受 服务 的 时 间 与 一 个 “ 忙 期" 联系 


起 来 . 

(f) 以 52 记 类 型 2 的 服务 时 间 . E[N|52] 是 什么 ? 

(g) 将 上 面 的 合 在 一 起 得 到 

ME[S1]E[S2] 

1— AE[S] 

用 显 式 (不 要 通过 极限 概率 ) 计算 习题 24 中 一 个 顾客 在 系统 中 等 待 的 平均 时 间 . 
在 G/M/1 模型 中 , 如 果 G 是 速率 为 和 的 指数 分 布 , 证 明 B = 和 /4. 

在 有 上 条 服务 线 的 厄 兰 损失 系统 , 假设 入 =1 和 EI[S] =4. 若 及 =0.2, 求 二 . 
验证 M/M/k 对 Pi 给 出 的 公式 . 

在 厄 兰 损失 系统 中 假设 泊 松 到 达 率 是 和 = 2, 并 且 假设 有 3 条 服务 线 , 每 一 条 的 服务 分 布 
是 (0,2) 上 的 均匀 分 布 . 问 系统 失去 的 潜在 顾客 的 比例 是 多 少 ? 


W8 = W3( 无 抢先 权 的 ) 十 
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50. 


51. 


. 在 M/M/k 系统 中 ， 

(a) 顾客 必须 在 队列 中 等 待 的 概率 是 多 少 ? 

(b) 确定 工 和 W. 

对 于 G/M/k 模型 , 验证 给 出 的 W6 的 分 布 公式 . 


“52. 考虑 一 个 系统 , 其 到 达 间 隔 时 间 有 一 个 任意 的 分 布 F, 而 且 有 一 条 单 服务 线 , 其 服务 分 布 为 


G. 以 D。 记 第 n 个 顾客 在 队列 中 等 待 的 时 间 数 量 . 解释 S。 和 7，, 使 


D -Dr+s -mi， 若 Do+Sn -Th>0 
人 若 Ds+Sn-T<0 


53， 考虑 一 个 模型 , 其 到 达 间隔 时 间 具 有 一 个 任意 的 分 布 F, 而 且 有 人 条 服务 线 , 每 一 条 服务 


三 


区 全 到 


9] 


线 具有 服务 分 布 G. 为 了 使 得 极限 概率 存在 , 你 认为 什么 条 件 是 已 和 G 所 必须 的 ? 
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第 9 章 可靠 性 理论 


9.1 3 引 言 


可 靠 性 理论 涉及 确定 一 个 可 能 由 许多 部 件 组 成 的 系统 运行 的 概率 . 我 们 将 假设 
系统 是 否 运行 只 由 运行 的 部 件 确定 . 例如 , 一 个 囊 联系 统 系统 运行 当 且 仅 当 其 所 有 
的 部 件 都 运行 , 而 一 个 并 联系 统 系统 运行 当 且 仅 当 至 少 它 的 一 个 部 件 运行 . 在 9.2 
节 中 , 我 们 探讨 依赖 其 部 件 运行 的 系统 的 可 能 运行 方式 . 在 9.3 节 中 , 我 们 假设 每 个 
部 件 以 某 个 已 知 的 概率 (彼此 独立 地 ) 运行 , 并 展示 如 何 得 到 系统 运行 的 概率 . 由 于 
显 式 计算 这 些 概率 常 有 困难 , 在 9.4 节 中 , 我 们 也 给 出 了 有 用 的 上 界 和 下 界 . 在 9.5 
节 中 , 假设 某 个 部 件 在 开始 时 是 运行 的 , 而 在 它 失效 前 运行 一 个 随机 长 的 时 间 , 我 
们 按时 间 动 态 地 观察 一 个 系统 ， 然 后 讨论 系统 的 运行 时 间 分 布 与 部 件 的 寿命 分 布 
之 间 的 关系 .特别 地 , 如 果 一 个 部 件 运行 的 时 间 有 一 个 平均 递增 失效 率 (increasing 
failure rate on the average, IFRA) 分 布 , 那么 系统 的 寿命 分 布 也 有 同样 的 性 质 . 在 
9.6 节 中 , 我 们 考虑 如 何 得 到 系统 平均 寿命 的 问题 . 在 最 后 一 节 , 我 们 分 析 当 失效 部 
件 实行 修理 时 的 系统 . 


9.2 结构 函数 


考虑 一 个 由 n 个 部 件 组 成 的 系统 , 并 且 假设 每 个 部 件 或 者 运行 , 或 者 失效 . 为 
了 表示 第 i 个 部 件 是 否 运行 , 我 们 定义 示 性 变量 zi 为 
Rd { 1， 若 第 ;个 部 件 在 运行 
” 【0， 若 第 i 个 部 件 失效 
向 最 = = (z1,…,zn) 称 为 状态 向 量 . 它 表明 哪个 部 件 在 运行 , 哪个 部 件 已 失效 . 
我 们 进一步 假设 , 系统 作为 整体 是 否 能 运行 完全 由 状态 向 基 = 决定 . 特别 地 ， 
假定 存在 一 个 函数 qz) 使 
Ws { 1， 如果 当 状态 向 量 是 = 时 系统 运行 
0， 如 果 当 状态 向 量 是 = 时 系统 失效 
函数 %(z) 称 为 系统 的 结构 函数 . 
例 9.1( 串 联结 构 ) 一 个 串联 系统 运行 当 且 仅 当 它 的 所 有 部 件 都 运行 . 因此 , 它 的 结 
构 函数 为 


468 第 9 章 可 靠 性 理论 


$2) = min(z1,…, zn) = Iz: 


i=1 
我 们 将 看 到 用 一 个 示意 图 表示 系统 函数 是 很 有 用 的 . 有 关 串 联系 统 的 示意 图 如 图 
9.1 中 所 示 . 其 想法 是 , 如 果 一 个 信号 开始 在 示意 图 的 左 端 , 那么 , 为 了 成 功 地 到 达 
右 端 , 它 必 须 经 过 所 有 的 部 件 ; 因此 , 部 件 必须 都 在 运行 . 国 


全 


汉 n 
图 9.1 串联 系统 
例 9.2( 并 联结 构 ) 一 个 并 联系 统 运行 当 且 仅 当 至 少 它 的 一 个 部 件 在 运行 . 因此 , 它 
的 结构 函数 为 


Hz) = max(zl ,Zn) 
一 个 并 联结 构 可 以 通过 图 9.2 示意 说 明 . 这 是 由 于 开始 在 左 端的 一 个 信号 能 够 成 功 
地 到 达 右 端 , 只 要 至 少 它 一 个 的 部 件 在 运行 即 可 . 国 


图 9.2 并 联系 统 


例 9.3(n 中 结构) 串联 系统 与 并 联系 统 都 是 ”中 上 系统 的 特殊 情形 . 这 样 的 系 
统 运行 当 且 仅 当 它 的 n 个 部 件 中 至 少 有 上 大 个 部 件 在 运行 . 因为 并 上 ;zi 等 于 在 运行 
的 部 件 个 数 , n 中 系统 的 结构 函数 为 


申 联 系统 和 并 联系 统 分 别 是 n 中 n 系统 和 n 中 1 系统 . 

3 中 2 系统 可 以 由 图 9.3 的 示意 图 表达 . 图 
例 9.4( 一 个 4 个 部 件 的 系统 ) 考虑 一 个 由 4 个 部 件 组 成 的 系统 , 而 且 假设 这 个 系 
统 运行 当 且 仅 当 部 件 1 和 2 都 在 运行 且 部 件 3 和 4 中 至 少 有 一 个 在 运行 . 它 的 结 
构 函数 由 


$2) = T172 Immax(z3a,z4) 
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1 


图 9.3 3 中 2 系统 


给 出 . 用 图 形 表示 , 这 个 系统 正如 图 9.4 所 示 . 一 个 容易 验证 的 有 用 恒等式 是 , 对 于 
二 进位 变量 9 zi,(i=1,…,n) 有 
max(zl…,zn) =1— II -zi) 


i=1 
当 n=2 时 ,有 
max(z1,72) =1— (1— 71)(1— 722)= 71+72— 7172 
因此 , 在 这 个 例子 中 的 结构 函数 可 以 写成 
gz) = zlzz(zs 十 Z4 一 Z374) 图 
3 


图 9.4 


自然 地 , 假定 用 一 个 能 运行 的 部 件 代替 一 个 失效 的 部 件 绝对 不 会 影响 这 个 系统 . 换 
句 话说 , 自然 地 假定 结构 函数 w(z) 是 z 的 增 函 数 , 就 是 说 , 如 果 mi < yi,i = 1,…,n， 
那么 Wz) < b(y). 在 本 章 中 将 作 这 样 的 假定 , 且 这 样 的 系统 称 为 单调 的 . 

最 小 道路 与 最 小 切割 集 

在 本 节 中 , 我 们 展示 怎样 将 一 个 任意 的 系统 表示 为 , 既是 并 联系 统 的 串联 排列 ， 
又 是 串联 系统 的 并 联 排列 . 我 们 需要 下 面 的 概念 作为 准备 . 

一 个 状态 向 量 z 称 为 一 个 道路 向 量 , 如 果 4(z) = 1. 此 外 如 果 对 于 一 切 y < zx 
都 有 p(y) = 0, 那么 = 称 为 一 个 最 小 道路 向 量 .2 如 果 zx 是 一 个 最 小 道路 向 量 , 那 
么 集合 4 = {i: zi = 1} 称 为 最 小 道路 集 . 换 句 话说 , 一 个 最 小 道路 集 是 使 运行 部 件 
的 最 少 并 且 保 证 系统 运行 的 集合 . 

@ 一 个 二 进位 变量 是 或 者 取 0, 或 者 取 1 的 变量 . 

@ 我 们 说 y < z, 如 果 yi < zi,i 二 1,…,n, 而 且 对 于 某 个 i 有 yi < Ti. 
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例 9.5 考虑 一 个 5 部件 的 系统 , 其 结构 如 图 9.5 所 示 . 它 的 结构 函数 等 于 
gz) = max(T1, 72) max(T3r4, 75) = (T1 + T2 — T172)(T3T4 + Ts 一 Z37475) 


存在 4 个 最 小 道路 集 , 即 , {1,3,4}、{2,3,4}、 {1,5}、 {2,5}. 图 


例 9.6 在 一 个 n 中 结构 的 系统 中 ,有 () 个 最 小 道路 集 , 即 是 所 有 恰 由 个 


部 件 组 成 的 集合 . 图 

以 4，…,4。 记 给 定 系统 的 最 小 道路 集 全 体 . 我 们 定义 第 j 个 最 小 道路 集 的 示 
性 函数 aj(z) 为 

六 { 1， 如 果 4; 的 所 有 的 部 件 都 在 运行 
0， 其 他 情形 
= 了 
i€EAj 
由 定义 推出 , 如 果 至 少 一 个 最 小 道路 集 的 所 有 的 部 件 都 在 运行 , 即 , 如 果 对 于 某 个 j 
有 ai(z) = 1, 则 系统 在 运行. 另 一 方面 , 如 果 系 统 在 运行, 则 在 运行 的 部 件 集合 必须 
至 少 包含 一 个 最 小 道路 集 ， 所 以 , 一 个 条 统 将 运行 当 且 仅 当 ,至少 一 个 最 小 道路 集 
的 所 有 部 件 都 在 运行 . 因此 ， 
Ge) = { 1， 如 果 对 于 某 个 7 有 oj(z) = 1 
0， 如 果 对 于 一 切 了 有 aj(z) = 0 
或 者 , 等 价 地 
gm) = maxas(z) = max [I z: (91) 
1 4 . iEA; 

因为 aj(z) 是 第 7 个 最 小 道路 集 的 部 件 串联 结构 函数 , 方程 (9.1) 就 将 一 个 任意 系 
统 表示 为 申 联 系统 的 并 联 排列 . 
例 9.7 ”考虑 例 9.5 中 的 系统 . 因为 它 的 最 小 道路 集 是 A1 = {1,3,4}, 42 = {2,3,4}， 
hs = {1,5}, 44 = {2,5}, 所 以 由 方程 (9.1) 我 们 有 


gz) = max{T173T4, T27374, T175, T2T5} 
=1—(1— Zz17374)(1 — T27374)(1 一 zlz5)(1 — Z275) 
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你 应 该 验证 这 等 于 例 9.5 中 给 出 的 %z) 的 值 (利用 事实 : 由 于 zi 等 于 0 或 1, 所 以 
有 2 = zi). 这 个 表示 可 以 用 图 9.6 表达 . 国 


图 9.6 
例 9.8 ”结构 如 图 9.7 中 图 形 的 系统 , 称 为 桥 联系 统 . 它 的 最 小 道路 集 是 {1,4}、{l, 3， 
5}、{2,5}、{2,3,4}. 因此 , 由 方程 (9.1), 它 的 结构 函数 可 以 表示 为 
dr)= max{T174, T17375, T275, T2737T4} 
=1-—(1— zlz4)(1 — Z17375)(1 一 Z275)(1 — Z27374) 


图 9.7 桥 联系 统 
这 个 表示 9(z) 的 示意 图 如 图 9.8 所 示 . 图 


图 9.8 


如 果 4(z) = 0, 状态 向 量 = 称 为 切割 向 量 ， 此 外 如 果 对 于 一 切 y > z 都 有 
9(y) = 1, 则 称 = 为 一 个 最 小 切割 向 量 . 如 果 z 是 一 个 最 小 切割 向 量 , 那么 称 集合 
C = {i: zi 二 0} 为 最 小 切割 集 . 换 句 话说 , 最 小 切割 集 是 使 得 系统 失效 的 失效 部 件 
的 最 小 集合 . 
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以 C01,…,Ck 记 给 定 系统 的 最 小 切割 集 的 全 体 . 我 们 定义 第 j 个 最 小 切割 集 的 


示 性 函数 6j(z) 为 
Bi 如 果 第 7 个 最 小 切割 集中 至 少 一 个 部 件 在 运行 
0， 如 果 第 j 个 最 小 切割 集中 所 有 的 部 年 都 不 运行 


= max zi 
i€Cj 


因为 一 个 系统 不 能 运行 当 且 仅 当 , 至 少 一 个 最 小 切割 集 的 所 有 部 件 都 不 运行 , 由 此 
推出 


gz) = I Bi(z) = he Le (9.2) 
由 于 B;(z) 是 第 j 个 最 小 切 抽 集 部 件 的 一 -个 并 联结 构 函 数 方程 (9.2) 就 将 一 
个 任意 系统 表示 为 并 联系 统 的 串联 排列 . 


例 9.9 图 9.9 中 桥 联 结构 的 最 小 切割 集 是 {1,2}、{1,3,5}、{2,3,4}、{4,5}. 因此 ， 
从 方程 (9.2), 我 们 可 以 将 9(z) 表示 为 
gz)= max(zl,72) max(Zl,za,zZ5) max(T2, 73, T4) max(Z4,Z5) 
=[1— (1-2)(1—z2)) (1 -21)(—z)(1— 25)] 
x[1— (1— £2)(1 — z3)(1 — za)][1 — (1— z4)(1 ~— zs)] 
g(z) 的 这 个 表示 用 图 形 表达 如 图 9.10 所 示 . 图 


图 9.10 桥 联系 统 的 最 小 切割 表示 


9.3 ”独立 部 件 系统 的 可 靠 性 


在 这 一 节 中 , 我 们 假设 第 i 个 部 件 的 状态 X; 是 随机 变量 , 使 得 
P{Xi=1}=p:=1-P{Xi=0} 
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其 中 值 p; 等 于 第 i 个 部 件 运行 的 概率 , 称 为 第 i 个 部 件 的 可 靠 度 . 如 果 定 义 为 
7 一 P{d(X) =1), 其 中 天 = (Xi,…,Xn)， 
那么 + 称 为 条 统 的 可 靠 度 . 当 部 件 , 即 , 随机 变量 Xi(i = 1,…,n) 相互 独立 时 , 我 们 
可 以 将 7 表示 为 部 件 可 靠 度 的 一 个 函数 . 即 
7r=r(p)， 其 中 p= (pu 
函数 7(p) 称 为 系统 的 可 靠 性 函数 . 在 本 章 余下 的 部 分 我 人 总 假定 部 件 之 间 是 独 
立 的 . 
例 9.10( 串 联系 统 ) n 个 独立 部 件 串 联系 统 的 可 靠 性 函数 为 ， 
r(p)=P{d(X) = 1} =P{Xi=1， 对 所 有 的 i=1,…,n} = 了 I 四 
i=1 
例 9.11( 并 联系 统 ) n 个 独立 部 件 并 联系 统 的 可 靠 性 函数 为 
=P{¢(X)=1} 
二 P{Xi = 1， 对 某 个 i=1,…,n} 
三 1 一 P{Xi =0, 对 所 有 的 i= 1,…,n} 
=1-JI0-P;) 图 
让 1 
例 9.12( 具 有 等 概率 的 n 中 结构 系统 ) 考虑 一 个 中 大 的 系统 . 如 果 对 于 所 有 
的 i=1,…,n 有 pi=p, 那么 可 靠 性 函数 为 


rp p)=P{GX) =1}= ?位 < > 二 
i=l1 


-ro 二 


例 9.13(3 中 2 系统 ) 一 个 3 中 2 系统 的 可 靠 性 函数 为 
7(p)= P{9(X)=1} 
=P{X=(1,1,1)}+P{X =(1,1,0)} 
+P{X=(1,0,1)}+P{X = (0,1,1)} 
= Pip2p3 + pip2(1 — p3) 十 Pi(1 ~— p2)ps + (1 — pi)p2p3 
= Pip2 + pips + p2p3 一 2p1p2p3 
例 9.14(4 中 3 系统 ) 一 个 4 中 3 系统 的 可 靠 性 函数 为 
7(Pp)= P{ 天 = (1111)}+P{ 瑟 = (1,1,1,0)}+ P{X = (110,1)} 
+P{ 瑟 = (10,11)}+P{ 瑟 = (0,1,1,1)} 
= pip2pap4 + pip2p3(1 一 Pa) + pip2(1 一 Ps)pa 
+p1(1 — p2)papa + (1 — pi1)p2papa 
= pip2p3 + pip2pa 十 plpapa + Pp2p3p4 一 3p1p2p3p4 国 
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例 9.15(5 部 件 系统 ) 考虑 一 个 当 且 仅 当 部 件 1、 部 件 2 和 其 他 部 件 中 至 少 一 个 运 
行 时 系统 运行 的 5 部 件 系统 . 它 的 可 靠 性 函数 为 
7r(p)=P{X1 =1,X2 = 1,max(Xs, Xa, Xs) = 1} 
=P{Xi = 1}P{Xa = 1}P{max(X3, X4, Xs) = 1} 
= pip2[l — (1 — pa)(1 — pa)(1 —ps)] mn 


因为 p( 关 ) 是 一 个 0-1( 即 伯 努 利 ) 随机 变量 , 我 们 也 可 以 通过 对 它 取 期 望 计算 


(p). 即 
et r(p) =P{¢(X)= 1}= El¢(X)] 


例 9.16(4 部 件 系统 ) 一 个 当 部 件 1、 部 件 4 和 其 他 部 件 中 至 少 一 个 运行 时 系统 运 
行 的 4 部 件 系统 , 其 可 靠 性 函数 为 
gz) = zizd max(z2,z3) 


国 r(p)=EI%(X) 


= E[X1X4(1 — (1 — X2)(1 — X3))] 
=pipsll — (1 — p2)(1 — ps)] 
可 靠 性 函数 r(p) 的 一 个 重要 且 直 观 的 性 质 , 由 以 下 命题 给 出 . 
命题 9.1 如 果 r(p) 是 一 个 独立 部 件 系统 的 可 靠 性 函数 , 则 7T(p) 是 了 的 增 函数 . 
证 明 取 条 件 于 Xi, 并 且 利用 部 件 的 独立 性 , 我 们 得 到 
7(p)= EI[¢(X)] 
= PiE[G(X)|Xi =1]+(1— pi)EI¢(X)|Xi = 0] 
= piE[G(1i, X)] + (1 — pi)ElG(0i, X)] 


其 中 
(5 于) = (Xl Xi 1, Xit1,**, Xn) 


(0i, XX) = (X1,:**, Xi1,0, Xi Xn) 


于 是 
7T(p) = piE[lO(1i, X) — (0i, X)] + EIp(0i, X)] 


然而 , 由 于 5 是 增 函 数 , 由 此 推出 
1 E[d(i, 瑟 ) — ¢(0i, X)] >0 
从 而 关于 一 切 i 上 述 量 对 p; 递增 . 因此 证 明了 结果 . 国 
现在 我 们 考虑 以 下 情形 : 一 个 含有 n 个 部 件 的 系统 将 由 每 种 部 件 恰好 有 2 个 
的 一 个 库存 构建 . 我 们 应 该 如 何 利用 库存 使 得 我 们 得 到 的 系统 可 运行 概率 最 大 ? 特 
别 地 , 我 们 是 否 应 该 构建 两 个 分 开 的 系统 , 这 种 情形 得 到 的 系统 的 可 运行 概率 是 


P{ 两 个 系统 中 至 少 一 个 运行 } = 1 一 P{ 两 个 系统 都 没有 运行 } 
=1-—[(1—r(p)(1 —r(p))] 
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其 中 Pi(z!) 是 第 一 个 (第 二 个 ) 系统 的 第 i 个 部 件 运 行 的 概率 ; 还 是 应 该 构建 单个 系 
统 , 使 其 第 i 个 部 件 在 运行 如 果 两 个 标号 i 的 部 件 中 至 少 一 个 在 运行 . 在 后 一 种 情 
形 , 系统 运行 的 概率 等 于 
r[1—(1—p)(1—p)] 
因为 1 一 (1 一 pi)(1 一 pi) 等 于 这 个 单 系统 中 的 第 i 个 部 件 在 运行 的 概率 .9 我 们 现在 
证 明 在 部 件 水 平 的 重复 比 在 系统 水 平 的 重复 更 为 有 效 . 
定理 9.1 ”对 于 任意 可 靠 性 函数 r 和 向 量 p,P' 有 
rl1—(1-p)(1—p)]>1-[1—r(P —r(p)] 
证 明令 访 ，…,Xn,Xi,…,X% 是 独立 的 0-1 随机 变量 , 满足 
pi=P{Xi=1}, p:=P{X!{=1} 
因为 Pfmax(Xi,X!) = 1} =1 一 (1 一 pi)(1 一共 ,由 此 推出 
7r[1 — (1—p)(1—p)] = El¢lmax(X,X)]] 
然而 , 由 6 的 单调 性 , 我 们 有 9(max( 义 , 久 ')) 大 于 或 等 于 (XX) 和 9(X'), 而 因此 至 
少 与 max(9(X'), 9(X')) 一 样 大 . 因此 从 上 面 我 们 得 到 
rl1—(1—p)(1—p)]> Elmax(¢(X),o(X"))] 
=P{max[¢(X),¢(X')] =1} 
=1—-P{$(X)=0,0(X') =0} 
=1-[1-r(Pl -7r(p)] 
其 中 第 一 个 等 式 来 自 max(6( 关 ), p(X')) 是 一 个 0-1 随机 变 基 的 事实 , 而 因此 它 的 
期 望 等 于 它 等 于 1 的 概率 . 入 
作为 上 述 定理 的 一 个 说 明 , 假设 我 们 从 每 种 部 件 都 有 两 个 的 库存 中 构造 一 个 两 
种 不 同类 型 部 件 的 串联 系统 . 假设 每 个 部 件 的 可 靠 度 是 1/2. 如 果 我 们 用 库存 构造 
两 个 分 开 的 系统 Q, 则 确保 一 个 系统 工作 的 概率 是 


2 
人- 
而 如 果 我 们 构造 重复 部 件 的 单个 系统 , 则 得 到 一 个 系统 工作 的 概率 是 
全 -8 
4 16 
因此 , 重复 部 件 比重 复 系统 导致 更 高 的 可 靠 度 (当然 , 由 定理 9.1, 它 必须 是 这 样 ). 


@ 注意 ， 如 果 一 (Gin 那么 zy = (zl …,znyn)， 同样 , max(z,y) = 
(max(zl, gmi)…,max(znyyn)) 和 min(z, y) = (min(zl,yi) ,min(znyyn))- 


@ 意 即 重复 系统 的 并 联 . 一 一 译 者 注 
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9.4 可靠 性 函数 的 界 
考虑 例 9.8 中 的 桥 联系 统 , 它 由 图 9.11 表示 . 利用 最 小 道路 表示 , 我 们 有 


gz) =1— (1—z174)(1 — T17375)(1 一 Z275)(1 一 Z27374) 
因此 
r(p) =1 一 E[(1 一 XIX4)(1 一 XIXsXs)(1 一 X2Xs)(1 — X2X3X4)] 
然而 , 由 于 最 小 道路 集 有 重 迭 ( 即 有 公用 部 件 ), 所 以 随机 变节 (1 一 XiX4)、(1 一 
X1X3X5)、(1 一 X2Xs)、(1 一 X2XsX4) 并 不 独立 , 从 而 它们 的 乘积 的 期 望 值 不 等 于 
它们 的 期 望 值 的 乘积 . 所 以 , 为 了 计算 >(p), 我 们 必须 先 将 这 4 个 随机 变量 相 乘 , 然 
后 再 取 期 望 值 .为 此 , 利用 X? = Xi, 我 们 得 到 
7(p)= 卫 [XI Xa + X2Xs + XIX3sXs + X2XsX4 一 XIX2X3X4 
一 XIX2X3X5 一 XIX2X4Xs — XIXsX4X5 — Xo2X3X4X5 
十 2XiX2XsX4X5] 
= Pipa + p2ps + Plpsps 十 P2p3p4a 一 P1p2p3p4 一 P1p2p3ps 
—Ppip2paps — pip3paps 一 papapaps + 2p1p2p3paps 


图 9.11 


从 上 述 例 子 可 以 看 出 , 计算 r(p) 往往 是 很 繁琐 的 , 所 以 如 果 我 们 有 简单 的 办 法 
得 到 它 的 界 , 则 是 很 有 用 的 . 现在 我 们 考虑 得 到 界 的 两 种 方法 . 


9.4.1 容 斥 方法 
下 面 是 一 个 熟知 的 事件 1, E2,…, En 的 并 的 概率 公式 : 


Pp | 可 = P(E)— DD PEE)+ ,DD P(EBE,E:) 
i=1 tl i<j i<j<k (9.3) 


— (1)"+P(B BE... E,) 
作为 上 面 公式 的 结果 , 不 那么 熟知 的 是 下 面 一 组 不 等 式 : 


La (v 可 < 和 PLD) 
i=1 i=1 


9.4 可 靠 性 函数 的 界 “” 477 


(可 > Ei) - DP(E:E;), 


i<j 


(Us) < P(E) -Ps eo 


i<j<k 


了 也 
‘Gf 


人 V 


(9.4) 


其 中 当 我 们 加 上 P(UE: BB:) 展开 式 的 一 个 附加 项 时 总 是 改变 不 等 式 的 方向 . 

公式 (9.3) 通常 由 对 事件 的 个 数 作 归 纳 来 进行 证 明 . 然而 , 让 我 们 介绍 另 一 个 
方法 , 它 不 仅 将 证 明 方 程 (9.3), 而 且 也 建立 不 等 式 (9.4). 

作为 开始 , 定义 示 性 随机 变 其 5(j = 1,…,n) 为 


了 1 着 已 发 生 
” 人 o%， 其 他 情形 


令 n 


然后 以 尺 记 (1 < j < n) 中 发 生 的 个 数 . 同样 , 令 


二 申 若 N>0 
0, 若 N=0 


那么 , 因为 
1-I=(1-D” 


应 用 二 项 式 定理 , 我 们 得 到 


Ls (ca 


i=0 


0 


现在 利用 下 面 的 组 合 恒等式 ( 它 很 容易 由 对 i 作 归 纳 法 得 到 ): 
(9 本 (二 i 的 人 A 


于 是 由 上 式 推出 
鸭 守 sly 6 
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从 方程 (9.5) 和 方程 (9.6) 我 们 得 到 
IgN, 在 (9.6) 中 令 i=2 
7>x-(2)， 在 (9.6) 中 令 i=3 


(9.7) 


N N 
cv 人 + 全 
如 此 等 等 . 现在 由 于 N < mw 而 且 只 要 i> m 就 有 (六 ) = 0, 我 们 可 以 将 方程 (9.5) 


本 I= 2 )c 1 (9.8) 


现在 等 式 (9.3) 和 不 等 式 (9.4) 可 由 对 (9.8) 和 (9.7) 取 期 望 得 到 ,事实 正 是 如 此 , 由 于 


E[1] = P{N > 0} = P{ 至 少 一 个 Bj 发 生 } = 了 人 可 
j=1 


= 也 芭 可 = P( 局 ) 
j=1 j=1 


a E [®)] = ElB; 发 生 的 成 对 数 ] 
= | 台 
i<j 
= 2 bb P(EiE;) 
并 且 , 一 般 地 a 


E [人 )| 二 E[B) 中 发 生 的 大 小 为 i 的 集合 的 个 数 ] 


1 
-中 DS me |- 于 区 P(B;, Bj .Ei,) 


Nl<ja<<i N11<ja<…<in 


在 不 等 式 (9.4) 中 显示 的 界 , 大 家 称 之 为 容 斥 界 . 为 了 用 它们 得 到 可 靠 性 函数 的 
界 , 以 A1,4A2,…, A。 记 给 定 结构 4 的 最 小 道路 集 的 全 体 , 并 且 定 义 ,Ez,…, EE, 为 


EE; = {在 4; 中 所 有 部 件 运行 } 
现在 , 由 于 系统 运行 当 且 仅 当 , 事件 E; 中 至 少 一 个 发 生 , 我 们 有 
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r(p) = (Us) 
应 用 (9.4) 得 到 r(p) 所 要 的 界 . 在 和 式 中 的 项 以 这 种 方式 计算 得 到 
P(E)= IIr, P(BB)= I vt, P(EBE)= I ? 


leéAs Ll€EAiUAS l€EAiUAjUAR 
以 及 多 于 3 个 事件 的 交 等 等 . (上 面 等 式 成 立 是 由 于 例如 , 为 了 尼 件 及 发生 , 在 
4; 中 的 所 有 部 件 和 在 A; 中 的 所 有 部 件 都 必须 在 运行 ; 或 者 换 句 话说 , 在 AiU 4; 中 
的 所 有 部 件 都 必须 在 运行 ). 
当 pi 都 很 小 时 , 许多 个 事件 E; 的 交 的 概率 应 该 也 很 小 , 收敛 应 该 相对 地 快 . 
例 9.17 ”考虑 相同 部 件 的 桥 联 结构 . 就 是 说 ,对 于 一 切 i 取 pi;=p. 以 4 = {14}， 
= {1,3,5}, 4s = {2,5} 和 44 = {2,3,4} 记 最 小 道路 集 , 我 们 有 
P(E)=P(E)=p, P(E2)=P(E)= 
同样 ,因为 在 6= (4) 个 4: 和 4; 的 并 中 恰 有 5 个 集合 含 4 个 部 件 (例外 是 4zU 44， 
它 含 所 有 5 个 部 件 ) 我 们 有 
P(BiE2) = P(EEs)=P(EEs) =P(LE2Es) = P(EsE4) = 
P(E2E4) = 
因此 , 前 两 个 容 斥 界 导致 
2(p2 +p3)— 5p: — ps < r(p) < 2(p? +p3) 
其 中 r(p) = "7(p,p,p,p,p): 例如 , 当 p = 0.2 时 , 我 们 有 
0.087 68 < r(0.2) < 0.096 00 


而 且 , 当 p = 0.1 时 ， 
0.021 49 < r(0.1) < 0.022 00 国 


正如 我 们 可 以 根据 最 小 道路 集 定义 事件 , 这 些 事件 的 并 就 是 系统 运行 这 个 事 
件 , 我 们 也 可 以 根据 最 小 切割 集 定义 事件 ， 它 们 的 并 就 是 系统 失效 这 个 事件 ， 以 
C1,C2，,…,Cr 记 最 小 切割 集 , 并 定义 事件 五 , 瑟 ，… 瓦 为 
Fi = {Ci 中 所 有 的 部 件 都 失效 }. 
现在 ， 因为 系统 失效 当 上 且 仅 当 ， 至 少 一 个 最 小 切割 集中 的 部 件 都 失效 , 我 们 有 


1—r(p)=P (Ua). 
i=1 
1-—r(p) < DP(F), 
1 -rm)> DP(R) -> PR), 
1—r(p) PP) DD PB)+ YD PRs 及 )， 


i<j i<j<k 
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以 此 类 推 . 因为 
P(F)=II0-p), PRB)= I Gp), PABF)= I Qn, 
leC: leCiUC; IEeCiUCiUCx 


当 pi 都 大 时 , 收敛 应 该 是 相对 地 快 的 . 
例 9.18( 随 机 图 ) 我 们 回忆 3.6.2 节 , 一 个 图 由 一 个 顶点 集合 N 和 顶点 对 ( 称 为 
弧 ) 的 集合 4 组 成 . 对 于 任意 两 个 顶点 i,j, 我 们 说 弧 的 序列 (ia), (iiz) (ix 人 
构成 一 条 i~j 道路 ， 如 果 在 所 有 的 【2 ) 对 顶点 i 和 j(i # j) 中 都 有 一 条 i~j 
道路 , 那么 这 个 图 称 为 连通 的 . 如 果 我 们 将 一 个 图 的 顶点 设想 为 地 理 位 置 , 而 弧 表 
示 顶 点 之 间 的 直接 通信 连接 , 那么 这 个 图 是 连通 的 , 如 果 任 意 两 个 顶点 彼此 都 能 连 
接 一 一 如 果 不 是 直接 的 , 那么 至 少 通过 中 间 的 顶点 连接 . 

一 个 图 总 可 以 分 成 不 重 倒 的 连通 子 图 , 称 为 分 量 ， 例 如 , 在 图 9.12 中 由 顶点 
N = {1,2,3,4,5,6} 和 弧 4 = {(1,2),(1,3), (2,3), (4,5)} 组 成 的 图 包含 3 个 分 量 (一 


个 由 单个 硕 点 组 成 的 图 也 认为 是 连通 的 ). 
© 
图 9.12 


现在 考虑 有 顶点 1,2,…,n 的 随机 图 ,其 中 有 从 顶点 i 到 顶点 j 的 一 条 弧 的 概率 
为 Pi 假定 这 些 弧 的 出 现 组 成 独立 的 事件 . 即 , 假定 这 (”) 个 随机 变 基 Xiy(i z 
都 是 独立 的 , 其 中 


好 一 


1， 如 果 (2 了 是 弧 
0， 其 他 情形 
我 们 感 兴趣 的 是 这 个 图 是 连通 图 的 概率 

我 们 可 以 将 上 述 情形 设想 为 有 ( 2 ) 个 部 件 的 可 靠 性 系统 一 每 一 个 部 件 对 
应 于 一 条 潜在 的 弧 .一 个 部 件 称 为 在 工作 , 如 果 对 应 的 弧 确 实 是 网 络 的 一 条 弧 , 而 
系统 称 为 在 工作 , 如 果 对 应 的 图 是 连通 的 . 因为 对 于 一 个 连通 图 增加 一 条 弧 , 不 会 使 
它 不 连通 , 由 此 推出 这 样 定义 的 结构 是 单调 的 

让 我 们 从 确定 最 小 道路 集 与 最 小 切割 集 开始 ， 容 易 看 出 一 个 图 不 连通 当 且 仅 
当 , 弧 的 集合 可 以 分 成 两 个 非 空子 集 X 和 Xe, 使 没有 弧 从 X 的 一 个 顶点 连通 到 
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Xe 的 一 个 顶点 . 例如 , 如 果 有 6 个 顶点 , 且 没 有 任何 弧 连 接 1, 2,3,4 中 的 任意 顶点 
到 顶点 5 或 顶点 6, 那么 这 个 图 显然 是 不 连通 的 . 于 是 , 我 们 看 到 将 顶点 集 任意 划分 
成 两 个 非 空子 集 X 和 X*, 对 应 于 由 

{(i,7) :i€e X,jeX°} 
定义 的 最 小 切割 集 . 因为 有 2"-! 一 1 个 这 样 的 划分 (有 2" 一 2 种 方式 选取 非 空 真子 
集 X, 而 划分 XX,X° 是 与 划分 Xe,X 相同 的 , 我 们 必须 除 以 2), 所 以 有 这 样 个 数 的 
最 小 切割 集 . 

为 了 确定 最 小 道路 集 , 我 们 必须 刻画 弧 的 最 小 集合 使 最 终 得 到 一 个 连通 图 . 现 
在 图 9.13 中 的 图 是 连通 的 , 但 是 如 果 从 在 图 9.14 中 所 示 的 环 路 移 去 任意 一 条 弧 , 它 
将 仍 保持 连通 性 . 事实 上 , 不 难看 出 最 小 道路 集 恰 是 这 样 的 弧 的 集合 , 它 导致 一 个 图 
连通 , 但 是 没有 任何 的 环 路 (一 个 环 路 是 顶点 到 它 自己 的 一 条 道路 ). 这 样 弧 的 集合 
称 为 生成 树 (图 9.15). 容易 验证 每 一 个 生成 树 恰 有 n 一 1 条 弧 , 而 在 图 论 的 一 个 著名 
的 结果 (由 Cayley 给 出 ) 是 , 恰 有 n"? 个 这 样 的 最 小 道路 集 . 


全 


图 9.13 9.14 


ee 
CU G) ©@ © 
9.15 ” 当 n= 4 时 的 两 个 生成 树 (最 小 道路 集 ) 


因为 最 小 道路 集 和 最 小 切割 集 的 个 数 很 多 (分 别 是 n*-? 和 2m! 一 1 个), 所 以 
要 得 到 有 用 的 界 而 不 作 进一步 的 假定 是 困难 的 . 于 是 , 我 们 假定 所 有 的 Pi; 都 等 于 
一 个 共同 的 值 p. 即 假设 每 一 条 可 能 的 弧 都 独立 地 以 相同 的 概率 p 存在 . 我 们 从 对 
图 的 连通 概率 推导 一 个 递 推 公式 开始 , 当 n 不 太 大 时 , 从 计算 的 角度 这 是 有 用 的 , 而 
当 n 大 时 , 我 们 将 给 出 一 个 渐 近 公式 . 

让 我 们 以 P 记 有 m 个 顶点 的 随机 图 为 连通 的 概率 . 对 已, 推导 一 个 递 推 公式 ， 
我 们 首先 集中 注意 于 一 个 单 顶点 (例如 说 , 顶点 1) 并 且 意图 确定 顶点 1 是 图 一 个 大 
小 为 上 的 分 基 的 一 部 分 的 概率 . 现在 给 定 其 他 一 1 个 顶点 的 集合 , 这 些 顶 点 与 顶 
点 1 一 起 形成 一 个 分 基 , 如 果 
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人 没有 弧 将 这 个 顶点 中 的 任意 一 个 与 其 他 n 一 个 顶点 中 的 任意 一 个 连通 
起 来 ; 


的 限制 于 这 大 个 顶点 的 随机 图 (和 (*) 条 潜在 的 弧 , 每 条 独立 地 以 概率 p 出 


现 ) 是 连通 的 . 
() 和 (i) 都 发 生 的 概率 是 。 
gq" P, 
其 中 g=1-p. 因为 共有 (一 ] ) 种 方式 选取 大 -1 个 其 他 的 顶点 (与 顶点 1 一 起 


形成 一 个 大 小 为 大 的 分 基 ), 我 们 看 到 
P{ 顶 点 1 是 大 小 为 上 的 分 基 的 一 部 分 } 
地 (Ct Ean = 
现在 由 上 上 上面 的 概率 对 大 从 范围 1 到 n 求 和 显然 必须 等 于 1, 又 因为 这 个 图 是 连通 
的 当 且 仅 当 , 顶点 1 是 大 小 为 n 的 一 个 分 基 的 一 部 分 , 可 见 
n—l 
P=1- n 1) gn-ip,, =2,3,.…. (9.9) 
(x 1)s hn 
当 不 很 大 时 , 从 Pi = 1, 忆 =p 开始 , 方程 (9.9) 可 以 递 推 地 用 来 确定 P. 它 
特别 适合 于 数值 计算 . 
当 n 大 时 , 为 了 确定 P 的 一 个 渐 近 公式 , 首先 注意 从 方程 (9.9), 由 及 < 1 我 
们 有 


n-l 
1-P< 5 (I) 
Ey) 
因为 可 以 证 明 对 于 q < 1 和 充分 大 的 n 有 


n-l 


-= 
DR) < nt yer 


大 =1 

故而 对 于 很 大 的 mw 我 们 有 

1-P < (n+l)a™! (9.10) 
为 了 从 另 一 个 方向 得 到 一 个 界 , 我 们 集中 注意 于 一 种 特殊 类 型 的 最 小 切割 集 一 
即 , 将 一 个 顶点 与 图 的 其 他 的 顶点 分 离 的 那些 最 小 切割 集 ， 特 别 地, 定义 最 小 切 拓 
集 C; 为 

Ci={(6D):j# 引 
并 且 定义 及 为 在 Ci 中 所 有 的 弧 都 不 在 工作 的 事件 (从 而 顶点 i 孤立 于 其 他 项 点) 
现在 

1 P, = P( 图 不 是 连通 的 ) > P( 已) 
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这 是 因为, 如 果 事件 玉 中 任意 一 个 发 生 , 则 图 将 不 连通 的 . 由 容 斥 界 , 我 们 有 
P(UA) > DP(F)- HHPns) 
i i i<j 
因为 P(RI) 和 P( 有 局 ) 正好 分 别 是 一 个 n 1 条 弧 的 给 定 集合 和 一 个 24 - 3 条 弧 
的 给 定 集合 不 在 图 中 的 概率 (为 什么 ?), 由 此 推出 
人 


1 


所 以 
1- 己 > "+ (") 2n—3 
ng 2 gq 


将 它 与 方程 (9.10) 联合 起 来 导出 对 于 充分 大 的 n 有 
= (om <1-P, < (nt+l)a"™! 


因为 当 n 一 品 时 


我 们 看 到 , 对 于 很 大 的 n 


于 是 , 例如. 当 n=20 和 p= 时 , 随机 图 是 连通 的 概率 近似 地 为 


1N19 
Po 1—20 9| = 0.999 96 


9.4.2 ”得 到 7(p) 的 界 的 第 二 种 方法 

得 到 r(p) 的 界 的 第 二 种 方法 基于 把 要 求 的 概率 表示 为 事件 的 交 的 概率 . 为 此 ， 
如 前 面 一 样 以 A1, 42,…, 4s 记 最 小 道路 集 , 并 且 定 义 事件 D;(i = 1,…,s) 为 

D; = { 在 4; 中 的 部 件 至 少 有 一 个 失效 } 

现在 , 因为 系统 失效 当 且 仅 当 , 在 每 个 最 小 道路 集中 至 少 有 一 个 部 件 失效 , 我 们 有 

1—r(p) =P(DiDaz…Ds)= 了 P(DjP(Daz|D)…P(D.|DiDz…Ds-) (9.11) 
非常 直观 地 , Ai 的 部 件 至 少 一 个 失效 这 个 信息 只 能 增加 42 的 部 件 至 少 一 个 失效 的 
概率 (或 者 保持 概率 不 变 , 如 果 4; 和 42 没有 重合 ). 因此 , 直观 地 有 

P(D2|D1) > P(D2) 
为 了 证 明 这 个 不 等 式 , 我 们 写 出 
P(Da) = P(D2|D1)P(D1) +P(Dz|Di)( — P(D)) (9.12) 
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并 且 注 意 
P(Da|DS$) = P{4s 中 至 少 一 个 部 件 失效 |41 中 所 有 部 件 都 在 运行 } 
=1- [lL »; <1- Il »;=P(D;) 
jEA2 jeA2 
因此 , 从 方程 (9.12) 我 们 看 到 
P(Da) < P(D2lDi)P(D1) + P(Da)(1 —P(D1)) 
从 而 
P(Dz|DPi) > P(D;) 
用 相同 的 推理 , 也 推出 
P(DilD Di-l > P(D;) 
所 以 从 方程 (9.11) 我 们 得 到 
1-r(p) > [[P(D;) 


或 者 , 等 价 地 
rm <1-11(- II») 
JE4i 


为 了 得 到 在 相反 方向 的 一 个 界 . 以 C1,C2,…,C; 记 最 小 切割 集 , 并 且 定义 事件 
Ua,U2,…,U; 为 
Ui = {C; 中 至 少 一 个 在 运行 } 
那么 , 因为 系统 运行 当 且 仅 当 , 所 有 的 事件 Ui 都 在 运行, 我 们 有 


7(p)=P(ViVa:.U;) =P(UI)P(UVaIU)..:P(Ur UUr1) > [I PW;) 


其 中 最 后 的 不 等 趟 从 如 与 D; 的 相同 方式 建立 . 因此 ， 
rw>Ih- Ho- 
i jeCs 
于 是 我 们 对 可 千 性 函数 有 如 下 的 界 
Ih- Ia-ajlsrosi-I(- 
i jeéCs i 


i 


II») (913) 


jEAs 


自然 地 期 望 , 如 果 在 最 小 道路 集中 没有 太 多 的 重合 , 则 上 界 应 接近 于 真实 的 r(p), 而 
如 果 在 最 小 切割 集中 没有 太 多 的 重叠 , 则 下 界 也 接近 于 真实 的 7(p). 
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例 9.19 对 于 4 中 3 系统 , 最 小 道路 集 是 4: = {1,2,3}, 42 = {1,2,4}, hs = 
{1,3,4} 和 44 = {2,3,4}; 而 最 小 切割 集 是 C1 = {1,2},C2 = {1,3},Cs = {1,4}, 
C4 = {2,3},Cs = {2,4} 和 Cs = {3,4}. 因此 , 由 方程 (9.13) 我 们 有 
(1 — gq1g2)(1 一 glgs)(1 — q1g4)(1 一 92g3)(1 一 g294)(1 — gags) 
< r(p) < 1— (1— pip2p3)(1 — pip2p4)(1 — pipap4)(1 一 P2papa) 
其 中 qi = 1 一 pi. 例如 , 如 果 对 于 一 切 i 都 有 pi = 1/2, 那么 由 上 面 导出 
ol8 <7 (3) <0.59 
容易 计算 得 到 这 个 结构 的 确切 值 是 
I 1 5 
"(= 襄 =031 国 
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对 于 一 个 具有 分 布 函 数 G 的 随机 变 基 , 我 们 定义 (a) = 1 - G(o) 为 此 随机 变 
量 大 于 a 的 概率 . 

考虑 一 个 系统 , 其 中 第 i 个 部 件 运行 一 个 具有 分 布 F; 的 随机 长 度 的 时 间 , 而 后 
失效 . 一 旦 失效 , 它 将 水 远 保持 这 种 状态 . 假定 个 体 部 件 的 寿命 是 独立 的 , 我 们 如 何 
将 系统 寿命 分 布 表示 为 系统 可 靠 性 函数 r(p) 和 个 体 部 件 寿命 分 布 Fi(i = 1,…,n) 
的 函数 呢 ? 

为 了 回答 这 个 问题 , 我 们 首先 注意 系统 运行 一 个 时 间或 更 长 的 时 间 当 且 仅 当 
它 在 时 刻 t 还 在 运行 . 即 , 以 已 记 系统 寿命 的 分 布 , 我 们 有 

F(t) = P{ 系 统 寿 命 > t} = P{ 系 统 在 时 刻 t 还 在 工作 } 
但 是 , 由 r(p) 的 定义 我 们 有 
P{ 系 统 在 时 刻 上 还 在 工作 } = r(P(b，… Pa(t)) 
其 中 
R(t) = P{ 部 件 ;在 时 刻 上 还 在 工作 } =P{ 部 件 i 的 寿命 > t} = F(t) 


因此 我 们 看 到 3 Be 
F(t) =7(F1(t),.*, Fn(t)) (9.14) 


例 9.20 ”在 串联 系统 中 , r(p) = ITi-1 Pi, 于 是 由 方程 (9.14) 可 得 
F(t) = [IF:() 
i=1l 


当然 , 这 是 很 显然 的 , 因为 对 于 申 联系 统 , 系统 寿命 等 于 部 件 的 最 小 寿命 , 所 以 系统 
寿命 大 于 t 当 上 且 仅 当 所 有 的 部 件 寿命 都 大 于 t. mn 
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例 9.21 在 并 联系 统 中, r(p) = 1 一 了 21(1 一 pi), 从 而 
F(t)=1-— ITaw 
让 1 
上 式 也 容易 推导 , 只 要 注意 在 并 联 情 形 , 系统 寿命 等 于 部 件 的 最 大 寿命 . mn 


对 于 连续 分 布 G, 我 们 定义 G 的 失败 率 败 数 Mt) 为 
90 

"0 =a) 
其 中 g() = 蚂 多 .在 52.2 节 中 证 明了 ,如 果 G 是 一 个 产品 的 寿命, 则 At) 表示 一 
个 上 年 产品 失效 的 概率 强度 . 我 们 称 G 是 着 增 失 败 率 (IFR) 分 布 , 如 果 Mt) 是 t 的 
增 函数 . 类 似 地 , 我 们 称 G 是 着 减 失败 率 (DFR) 分 布 , 如 果 X(t) 是 t 的 减 函数 
例 9.22( 韦 布尔 分 布 ) 随机 变量 称 为 具有 韦 布 尔 分 布 , 如 果 它 的 分 布 函 数 对 于 某 个 
入 >0 和 a>0 为 


GH)=1-e 0, t>0 
韦 布尔 分 布 的 失败 率 函数 等 于 
Mt)= SO、 =aA(M)! 
于 是 , 韦 布尔 分 布 当 a > 1 时 是 IFR, 而 当 0 < a < 1 时 是 DFR; 当 a = 1 时 ， 
GD) = 1 一 eX 是 指数 分 布 , 它 既是 IFR, 又 是 DFR. 


例 9.23( 件 马 分 布 ) 随机 变量 称 为 具有 伯 马 分 布 , 如 果 它 的 密度 函数 对 于 某 个 入 > 0 
和 a>0 为 


一 At a 一 1 
g(t) = i t>0 
其 中 
T(a) =| a 
0 
对 于 伽 马 分 布 ， 


了 一 AZ a 一 1 
i mm | 和 Xe 一 (Az) Gi ee 
MO 7 "| Me- MN) -| A (3 路 
用 变量 替换 4 = zx 一 我们 得 到 
1 i uNo-l 
南 -| (+3) du 
因此 , 当 a>1 时 G 是 IFR, 当 0<ax1 时 它 是 DFR. mn 


假设 在 一 个 单调 系统 的 每 个 部 件 的 寿命 分 布 是 IFR. 这 能 否 推出 系统 的 寿命 也 
是 IFR? 为 了 回答 这 个 问题 , 让 我 们 首先 假设 每 个 部 件 有 相同 的 分 布 , 我 们 记 之 为 
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G. 就 是 说 , 及 (t) = G(t),i = 1,…,n. 为 了 确定 系统 的 寿命 是 否 为 IFR. 我 们 必须 计 
算 下 的 失败 率 函 数 和 F(t). 现在 由 定义 
Ar = (d/d)F(t) _ (d/db0 —7(GO) 
F(t) 7(G(t)) 
其 中 ey. 人 


因此 ， 


Ed) _ TO GO) GD)  ，， mr 四 
ED a tn,| 


r(G(t)) GO 
由 于 G(t) 是 t 的 减 函 数 , 由 此 从 方程 (9.15) 推出 , 如 果 相干 系统 的 每 个 部 件 有 
相同 的 IFR 寿命 分 布 , 而且 pr'(p)/r(p) 是 了 的 减 函 数 , 那么 系统 的 寿命 将 是 IFR. 
例 9.24 (相同 部 件 的 ” 中 大 系统 ) 考虑 n 中 大 系统 , 它 运 行当 且 仅 当 它 的 k 个 或 
更 多 的 部 件 在 运行 . 当 每 个 部 件 有 相同 的 运行 概率 p 时 , 在 运行 部 件 的 数目 将 是 参 
数 为 n 和 pp 的 二 项 分 布 . 因此 ， 


/nn ni 
"m=》, (Fra-n 
多 次 用 分 部 积分 , 可 以 证 明 它 等 于 


nl 


"0p) = Fn A 
求 微分 , 我 们 得 到 


AF(t)= 


(9.15) 


p 
| zk-1(1 一 z)n-kdz 
o 


! 人 
"= mA =p) 

所 以 
pt WN at BN a NA i kA 
en -BE EG) (EF) = 

令 y= z/p 得 到 


, De nk -1 
器- 同和 
由 于 (1 一 yp)/(1 一 p) 关于 p 递增 , 由 此 推出 pr'(p)/r(p) 是 p 的 减 函数 . 于 是 , 如 果 
一 个 由 独立 的 , 具有 相同 的 递增 失败 率 部 件 组 成 的 ”中 大 系统 , 则 这 个 系统 本 身 有 
递增 失败 率 . / 国 
然而 , 显示 的 是 , 对 于 一 个 由 独立 的 , 具有 不 同 的 递增 失败 率 的 部 件 组 成 的 n 中 
上 系统 , 系统 寿命 不 一 定 是 IFR 分 布 . 考虑 下 面 的 2 中 1 系统 ( 即 并 联系 统 ). 
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例 9.25( 一 个 不 是 IFR 的 并 联系 统 ) 一 个 由 两 个 独立 部 件 , 第 i 个 部 件 有 均值 为 

3 = 12) 的 指数 分 布 的 并 联系 统 的 寿命 分 布 为 
F(t)=1—(1-e')(1—-e-*)=e-*+e:—e-* 

所 以 

f(t) 2e-?t+e-t— 3 

通过 求 微分 容易 推出 ,X(t) 的 符号 由 e-5 一 e-at + 3e-4 所 决定 对 于 较 小 的 + 值 ， 

它 是 正信 而 对 于 较 大 的 值 它 是 负 值 .所 以 , Mt) 开 初 是 严格 递增 , 而 后 是 严格 间 

减 . 因此 , F 不 是 IFR. 图 

注 “上 述 例子 的 结果 在 一 看 十 分 令 人 惊奇 为 了 对 它 得 到 更 好 的 感觉， 我 们 需要 

混合 分 布 函数 的 概念. 分 布 函数 G 称 为 分 布 G1 和 分 布 Ga 的 混合 ,如 果 对 于 菜 个 

pO<p<1, 


Mt) = 


G(z) = pG1(7) + (1 —p)G2(z) (9.16) 

当 我 们 从 某 个 由 两 个 不 同 的 群体 决定 的 总 体 抽样 时 , 将 有 混合 发 生 . 例如, 假设 我 
们 由 产品 的 一 个 库存 , 其 中 p 部 分 是 类 型 1 产品 , 而 1 一 p 部 分 是 类 型 2 产品 . 假设 
类 型 1 产品 的 寿命 分 布 是 G1, 而 类 型 2 产品 的 寿命 分 布 是 G2. 如 果 我 们 随机 的 从 
库存 中 选取 一 个 产品 , 那么 它 的 寿命 分 布 正 如 方程 (9.16) 所 示 . 

现在 考虑 两 个 有 速率 分 别 为 Ai 与 A2 的 指数 分 布 的 混合 , 其 中 Ai < 和 2. 我 们 
有 兴趣 确定 这 个 混合 分 布 是 否 是 IFR. 为 此 , 我 们 注意 到 如 果 选 取 的 产品 “存活 ”到 
时 间 也 那么 , 它 的 剩余 分 布 仍旧 是 两 个 指数 分 布 的 混合 . 之 所 以 这 样 , 是 由 于 它 的 
剩余 分 布 仍旧 是 速率 为 Ai 的 指数 分 布 , 如 果 它 是 类 型 1 产品 , 或 者 速率 为 和 2 的 指 
数 分布 , 如 果 它 是 类 型 2 产品 . 然而 , 它 是 类 型 1 产品 的 概率 不 再 是 ( 先 验 的 ) 概率 
p, 但 是 现在 是 假定 它 已 经 “存活 ” 到 时 间 t 的 条 件 概率 . 事实 上 , 是 类 型 1 的 概率 为 
P{ 类 型 1, 寿命 > 里 _ pe 

P{ 寿 命 > 甘 Pet 十 (1 一 p)e 二 
因为 上 式 对 于 递增， 由 此 推出 , t 越 大 , 在 用 的 产品 越 可 能 是 类 型 1 的 ( 较 好 的 一 
个 , 因为 Ai < 和 2). 因此 , 产品 越 老 , 失效 的 可 能 越 小 , 从 而 混合 指数 分 布 远 远 不 是 
IFR, 事实 上 , 是 DFR. 

现在 , 让 我 们 回 到 两 个 由 速率 分 别 为 Ai 与 A2 的 指数 分 布 的 并 联系 统 . 系统 的 
寿命 可 以 表示 为 两 个 独立 的 随机 变量 的 和 , 即 


以 概率 


P{ 类 型 1| 寿 命 > 庄 = 


和 2 
和 1l 十 X2 
以 概率 一 

和 十 X2 


第 一 个 随机 变量 , 其 分 布 是 速率 为 和 1 十 和 2 的 指数 分 布 , 代表 直至 部 件 之 一 失效 的 


为 Exp( 和 1) 
寿命 = Exp( 和 1 十 和 2) 十 


为 Exp(Xz) 
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时 间 , 而 第 二 个 (是 混合 指数 分 布 ) 是 直至 另 一 个 部 件 失效 的 附加 时 间 (为 什么 这 两 
个 随机 变量 是 独立 的 ?) 

现在 , 假定 这 个 系统 已 经 “存活 ” 到 时 间 也 当 t 大 时 , 两 个 部 件 还 都 在 运行 的 可 
能 性 很 小 , 反而 很 可 能 一 个 部 件 已 经 失效 . 因此 , 对 于 大 的 t, 剩余 寿命 的 分 布 基本 


上 是 两 个 指数 的 混合 所 以 当 二 变 得 更 大 时 , 它 的 失效 率 应 该 涪 减 (正如 实际 发 
生 的 )， 国 
回忆 一 个 具有 密度 f(t) = F(t) 的 分 布 函数 F(t) 的 失败 率 函 数 定义 为 
__7G 
人 1— F(t) 


对 两 边 取 积分 , 我 们 得 到 
fk A(s)ds = [ f(s) ds- _inFd) 
0 0 i 


1—F\(s) 
因此 
F(t) =e-s(®) (9.17) 
其 中 9 
Alt) -| A(s)ds 
0 


函数 A(t) 称 为 分 布 的 风险 函数 (hazard function). 
定义 9.1 分 布 五 称 为 具有 平均 递增 失效 的 (IFRA), 如 果 对 于 t>0 


[ A(s)ds 


(9.18) 


A 
t 
关于 t 递增 . 
换 句 话说 , 方程 (9.18) 说 明 直至 时 间 t 的 平均 失败 率 当 t 增加 时 递增 . 不 难 证 
明 若 下 是 IFR, 则 FF 是 IFRA, 但 是 反 过 来 不 一 定 正确 . 


注意 三 是 IPRA, 如 果 只 要 0 < s st 就 有 4G < 人 (9, 这 等 价 于 


8 
Alat) _ AG) 
<, 


ee 对 于 0<a 和 1 和 一 切 +>0. 
但 是 由 方程 (9.17) 我 们 看 到 A(t) = 一 In F(t), 所 以 上 述 等 价 于 
—lnF(at) < —aln F(t) 
或 者 等 价 于 
InF(at) > InF"(t) 
由 于 Inz 是 z 的 单调 函数 , 这 说 明 下 是 IFRA 当 且 仅 当 ， 
F(at) >F"(t)， 对 于 0<a<1 和 一 切 t>0. (9.19) 
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对 于 一 个 向 量 了 = (p1,…,pn), 定义 pe = (pf，…,p8). 我 们 需要 下 面 的 命题 . 

命题 9.2 ”任何 可 靠 性 函数 r(P) 满足 
r(p")>[r(p)®, 0<asl 

证 明 ”我 们 对 系统 中 的 部 件数 ”进行 归纳 证 明 上 式 . 若 m = 1 则 r(p) = 0,r(p) =1 
或 者 r(p) 三 p. 因此 在 这 情形 命题 成 立 . 

所 以 假定 命题 9.2 对 于 n 一 1 个 部 件 的 一 切 单调 系统 都 成 立 , 并 且 考 虑 一 个 有 
结构 函数 9 的 n 个 部 件 的 系统 . 取 条 件 于 第 n 个 部 件 是 否 在 运行 , 我 们 得 到 

7(p°) = par(ln,p°) + (1— pa)r(0n, p") (9.20) 
现在 考虑 部 件 1 到 n 一 1 具有 结构 函数 91(z) = 9(1n,z) 的 系统 . 这 个 系统 的 可 靠 
性 函数 由 ri(p) = 7(1n,p) 给 出 ; 因此 , 由 归纳 假设 (对 于 一 1 个 部 件 的 一 切 单调 
系统 成 立 ), 我 们 有 
r(1n,p°) > [r(1n, Pp)]® 


类 似 地 , 通过 考虑 部 件 1 到 n 一 1 和 结构 函数 mo(z) = %(0n,z) 的 系统 , 我 们 得 到 
7(0n,p?) > [r(0n, Pp)]® 
于 是 , 由 方程 (9.20), 我 们 得 到 
7(p®) > prlr(1n, Pp)]® + (1 — pr)Ir(0n, p)]® 

利用 下 面 的 引 理 到 入 = pn, z = r(lw,p),y =T(0n,p)], 推出 

7(p™) > [pnr(1n,p) + (1 — pn)r(0n, p)]® = [r(p)]® 
这 就 证 明了 结果 . 国 
引 理 9.3 若 0<ag1,0< 入 <1, 则 对 于 一 切 0<y<zx 有 

h(y) = Mz + (1— My (M+(l— Ny >0 


证 明 ”这 个 证 明 留 作 习 题 . 国 
我 们 现在 证 明 下 面 的 重要 定理 

定理 9.2 ”对 于 独立 部 件 的 单调 系统 , 如果 每 个 部 件 有 IFRA 寿命 分 布 ， 那么 系统 

寿命 分 布 本 身 也 很 IFRA. 


证 明 系统 寿命 分 布下 为 
F(at) =7(Fi(at),:…, Fn(at)) 
因此 , 由 于 7 是 单调 函数 , 而 且 由 于 每 个 部 件 的 分 布 瓦 是 IFRA, 我 们 由 方程 (9.19) 


得 到 
F(at) > r(CET (本 的 ) > [r(F1(t),:-, Fn(t))]® = F(t) 


由 方程 (9.19) 就 证 明了 定理 . 其 中 最 后 的 不 等 式 由 命题 9.2 得 到 . 转 
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9.6 ”期 望 系统 寿命 


在 本 节 中 , 我 们 证 明 用 可 靠 性 函数 >(p) 和 部 件 的 分 布 五 (i = 1,…,n) 至 少 在 
理论 上 如 何 确定 系统 的 平均 寿命 . 

由 于 系统 寿命 是 t 或 者 更 长 当 且 仅 当 系统 在 时 刻 t 还 在 运行 , 我 们 有 

P{ 系 统 寿命 > t} =7(F(t)) 
其 中 五 0) = ( 国 (t),…, Fn(t))， 因 此 由 一 个 熟知 的 公式 , 即 对 于 任意 非 负 随机 变 
基 X， 
E[X] = _: P{X > z}dz. 
0 


我 们 看 到 ® a 
了 [系统 寿命 ] = | r(F(t))dt (9.21) 


例 9.26 (均匀 分 布 部 件 的 串联 系统 ) 考虑 3 个 独立 部 件 的 串联 系统 , 每 个 部 件 运行 
一 个 在 (0,10) 上 均匀 分 布 的 时 间 (以 小 时 计 ). 因此 , r(p) = Pipaps 且 


ng={ 各 0gtg10 ji-128 
1, t>10 
所 以 , 
10 一 上 
HEO)-| (号 ， ose<n 
0, t>10 
a 1 f/f10-t\ 5 
B| 系 统 寿 全 = 《25 ) dt= lo| vay = 


例 9.27(3 中 2 系统 ) 考虑 一 个 独立 部 件 的 3 中 2 系统 . 其 中 每 个 部 件 的 寿命 (以 
月 计 ) 在 (0,1) 均匀 分 布 . 正如 例 9.13 所 示 , 这 样 的 系统 的 可 靠 性 函数 为 


7(P) = pip2 + pips 十 pzps 一 2p1p2p3 


t, 0<t<1 
R(t) = 
0) 位 [2 


由 于 


@ 当 X 有 密度 /时 EIX] = 必 : P{X > zjdz 可 以 证 明 如 下 ， 


Ptx>aaz= 人 三 7roanae= 人 人 roanty= 广 wouy=zpq 


492 第 9 章 可 靠 性 理论 


我 们 从 方程 (9.21) 看 到 
1 


[系统 寿命]= [ea -中 -20-bdt= [er 2)dy=1-3=3 目 


例 9.28 (一 个 4 部 件 系统 ) 考虑 4 部 件 系统 , 它 当 部 件 1 和 2 运行 以 及 部 件 3 与 
4 中 至 少 一 个 运行 时 运行 . 它 的 结构 函数 由 

gz) = zl72(zs + Ta 一 7374) 
给 出 , 而 它 的 可 靠 性 函数 等 于 

7(p) = pip2(p3 十 pa 一 papa) 
当 第 i 个 部 件 的 寿命 在 (0,1),i = 1,2,3,4 上 均匀 分 布 时 , 让 我 们 计算 系统 寿命 的 均 
值 . 现在 


人 
ne- {te 
md oe 
因此 
-9( 瑟 9 [于 + 生生 9] 0o<t<l 
ro-{ 2 3 4 12 g BU 
0, $1 
所 以 
统考 人 = 喜 |( 一 0(2 一 D(12 一 at= Bg ~ 04 中 


我 们 以 得 到 独立 同 分 布 指数 寿命 部 件 的 n 中 上 系统 的 平均 寿命 来 结束 这 一 节 . 
如 果 9 是 每 个 部 件 的 平均 寿命 , 那么 
F(t) =e-t/? 
因此 , 由 于 对 于 ”中 上 系统 有 
r(pp 人 =》 (ra >) 


i=k 


从 方程 (9.21) 我 们 得 到 
统考 合 = 太守 (")(e- 9) 0 -eta 


i 
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作 替 换 
y =e-t/e, dy= jet = -pat 
导出 
E[ 系 统 寿命 | = 0 i-1(1 _ y)"id 
医 统 夺 仙 =03> (1) [OC | 
现在 , 不 难 证 明 9 
下 ma min! 
| yl-y™"dy= i (9.22) 

于 是 我 们 有 

[系统 寿命 | = D3 车 CD (9.23) 


i=k 

注 方程 (9.23) 可 以 直接 利用 指数 分 布 的 特性 来 证 明 . 首先 注意 n 中 此 系统 的 寿 
命 可 以 写成 全 十 … 十 Th-k+l 其 中 Ti 表示 在 第 i 一 1 个 失效 与 第 i 个 失效 之 间 的 时 
间 . 事实 如 此 , 因为 五 十 … 十 Th-k+l 等 于 第 n 一 上 十 1 个 部 件 失 效 的 时 间 , 这 也 是 在 
运行 的 部 件 的 个 数 首次 小 于 有 的 时 间 . 现在 , 当 所 有 nn 个 部 件 都 在 运行 时 ， 失效 发 
生 的 速率 是 n/0, 即 Ti 是 均值 为 6/n 的 指数 分 布 . 类 似 地 , Ti 表示 当 有 nn 一 i 十 1 个 
部 件 在 运行 直到 下 一 个 失效 的 时 间 , 由 此 推出 T; 是 均值 为 二 二 和 所 了 的 指数 分 布 ， 
因此 , 系统 的 平均 寿命 等 于 


1 1 
sa 


同样 注意 到 , 由 指数 分 布 缺 乏 记忆 性 推出 , Ti(i = 1,…,n 一 k 十 1) 是 独立 的 随机 变 
量 . 
并 联系 统 期 望 寿命 的 上 界 
考虑 一 个 n 部 件 的 并 联系 统 , 它们 的 寿命 不 一 定 是 独立 的 . 系统 寿命 可 以 表示 
为 
系统 寿命 = max Xi; 
其 中 X 是 第 i 个 部 件 的 寿命 , i = 1,…,n. 我 们 可 以 利用 下 面 的 不 等 式 得 到 期 望 系 
统 寿命 的 上 界 . 即 对 于 任意 常数 c， 
@ 令 
Cm = ry 
分 部 积分 导出 C(n,m) = CO+ lm-1). 以 Cn0) = 一 一 了 开始 ， 方程 (9.22) 由 数 
学 归纳 法 得 到 
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max Xi < c+ p34 -ot (9.24) 
i=1 
其 中 zt 是 z 的 正 部 , 等 于 z, 如 果 z > 0, 而 等 于 0, 如 果 x < 0. 不 等 式 (9.24) 的 
有 效 性 是 立刻 可 以 得 到 的 , 因为 若 maxi Xi < c, 则 左边 等 于 maxi Xi, 而 右边 等 于 c. 
另 一 方面 , 若 X(n) = maxi Xi > c, 则 右边 至 少 与 c+ (Xo 一 c) = X(n) 一 样 大 . 对 
不 等 式 (9.24) 取 期 望 得 到 


E [max 如 ] <c+ E[(Xi — o)+] (9.25) 
i=1l 


现在 , (Xi - cj+ 是 一 个 非 负 的 随机 变量 , 所 以 
E[(Xi — 0)+]= | P{(Xi— oO)+ > zjdz 
0 


oo 
-| P{Xi—c> Zz}dr 
o 


=[ POG > way 


于 是 , 我 们 得 到 Ry 
[mgxxi] e+ | P{Xi > y}dy (9.26) 
i=l°e 


因为 上 式 对 于 一 切 c 都 成 立 , 由 此 推出 , 我 们 可 以 通过 令 c 等 于 使 上 式 右边 最 小 的 
值 , 以 得 到 最 好 的 界 . 为 了 确定 这 个 值 , 对 于 上 述 右 边 求 微 商 , 并 置 其 结果 为 0, 可 以 
得 到 A 
1-》P{X >c=0 
i=1 
即 达到 最 小 化 的 值 c 是 使 n 
PE 时 于 
i=1 
的 值 e*. 因为 洒 ? P{X; > c} 是 c 的 减 函数 , 可 以 很 容易 地 逼近 c* 的 值 , 之 后 再 
用 于 不 等 式 (9.26) 中 . 另 请 注意 , 超过 c* 的 Xi 的 期 望 个 数 等 于 1 可 用 于 确定 c*( 见 
习题 32). c 的 最 佳 值 具有 的 这 样 的 性 质 是 很 有 趣 的 , 而 在 某 种 程度 上 的 直觉 是 , 当 
恰好 有 一 个 X; 超过 e 时 , 不 等 式 (9.24) 是 个 等 式 
例 9.29 ”假设 部 件 ; 的 寿命 是 速率 为 和 i(i = 1,…,n) 的 指数 分 布 . 那么 , 达到 最 小 
化 的 值 使 得 本 
1 = DP{x >c}= DO 
i=1 i=1 
且 系 统 寿命 的 均值 的 界 是 


E [maxxi] ge Sec —e*)1] 
i=1 
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二 十 Se -cIXi > cP{Xi > ec} 
i=1 


+El(Xi— ce')t|Xi < c']JP{Xi < ce*}) 


il , 
在 所 有 的 速率 都 相等 的 特殊 情形 , 假定 Xi = 和 ,i = 1,…,n, 那么 
1=ne- 或 c* = Fin(n) 


且 这 界 是 
BE[maxxXi] < s(n(n) +) 


即 , 若 X1,… ,Xn 是 同 分 布 的 速率 为 和 的 随机 变 基 , 则 上 式 给 出 了 它们 最 大 值 期 望 
值 的 一 个 界 . 在 这 些 随机 变量 也 是 独立 的 特殊 情形 , 由 方程 (9.25) 给 出 的 下 面 的 表 
示 式 ， 
E [max Xi] = uist| -dz ~ ~In(n) 国 
全 1 


它 并 不 比 上 面 的 上 界 小 多 少 . 


9.7 ”可 修复 的 系统 


考虑 具有 可 靠 性 函数 r(p) 的 n 个 部 件 的 系统 . 假设 部 件 i 运行 一 个 速率 为 Xi 
的 指数 时 间 , 然后 失效 ; 一 旦 失效 , 它 可 以 用 速率 为 局 的 指数 时 间 修 复 , i = 1,.…,n. 
所 有 部 件 都 独立 地 行动 . 

假设 开始 时 所 有 的 部 件 都 在 工作 , 并 且 令 

A(t) = P{ 系 统 在 时 刻 t 工作 } 
4(t) 称 为 在 时 刻 t 的 有 效 度 . 由 于 所 有 部 件 都 独立 地 行动 , 4(t) 可 以 用 可 靠 性 函数 
表达 如 下 : 
Alt) =7(A1(t),:…, An(t)) (9.27) 
其 中 
Ailt) = P{ 部 件 i 在 时 刻 t 工作 } 

现在 部 件 i 的 状态 (或 者 开 , 或 者 关 ) 按 一 个 有 两 个 状态 的 马尔 可 夫 链 变化 . 因此 由 
例 6.11 的 结果 , 我 们 有 


Hi Nt 
Ailt) = Poolt) = tp 
HO 


于 是 , 我 们 得 到 
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入 e-(A+p)t 
A=" (5 tt 


如 果 我 们 令 t 趋 于 co, 那么 我 们 得 到 其 极限 有 效 度 ( 记 为 4), 它 是 


和 加 
-如 0 入) 
注 (Gi) 如 果 部 件 i 开 和 关 的 分 布 分 别 是 具有 均值 为 1/ 和 i 和 1/jii 的 任意 连续 分 布 ， 
i 二 1,…,n, 那么 由 交替 更 新 过 程 的 理论 ( 见 7.5.1 节 ) 得 到 
1N kh 
3 Mtl p+ 和 
于 是 利用 可 人 靠 性 函数 的 连续 性 , 从 (9.27) 推出 极限 有 效 度 是 


4= 上 40=r( 


及 
天 
因此 , 4 只 依赖 于 开 和 关 的 分 布 的 均值 . 
(ii) 可 以 证 明 (利用 在 7.5 节 中 介绍 的 再 生 过 程 理论 ) A 也 等 于 系统 运行 时 间 的 
长 程 比 例 . 
例 9.30 ”对 于 一 个 申 联系 统 , r(p) = 了 1pi, 所 以 


= -Ha 入 @— Netpi)t 
Et + i i+ Xs 


n 
Hi 
A= 
Ha 


例 9.31 ”对 于 一 个 并 联系 统 , r(p) = 1 一 了 ;1(1 一 Pi), 所 以 


A(t) =1— I [ 2 {i= e- itps o] 


40=1- 攻 二 - 
i=1 


上 面 的 系统 在 运行 和 失效 之 间 更 替 . 让 我 们 以 Ui 和 Di(i > 1), 分别 记 第 i 次 运 
行 和 失效 的 时 间 长 度 . 例如 在 3 中 2 系统 中 , U1 是 直到 两 个 部 件 失效 时 的 时 间 ; D1 
是 直到 两 个 部 件 运行 时 的 附加 时 间 ; U2 是 直到 两 个 部 件 失效 时 的 附加 时 间 , 如 此 等 
等 . 以 
DV= tim +t tt J- lm D+ +Dn 
n=00 n 一 co n 


分 别 记 运 行 和 失效 的 平均 时 间 长 度 .? 
@ 用 再 生 过 程 的 理论 可 以 证 明 , 上 面 的 极限 以 概率 1 存在 , 而 且 是 常数 . 
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为 了 确定 可 和 万 , 首先 注意 在 前 n 个 运行 -失效 的 循环 中 ( 即 , 在 时 间 学 号 1 (Ui 十 
Di) 中 ) 系统 将 运行 一 个 时 间 学 ?_1 Ui. 因此 , 在 前 n 个 运行 -失效 的 循环 中 , 系统 运 
行 的 时 间 比 例 是 
Vit.…+Un DUi/n 
tttDt +D, Ti Ui/mnt+ DT, Di/n 
当 n 一 co 时 , 它 必须 趋 于 系统 运行 时 间 的 长 程 比例 4. 因此 ， “ 


到 
7 5-4-" (ss) (9.28) 
然而 ,为 了 求解 芯 和 万 , 我 们 需要 另 一 个 方程 . 为 此 考虑 系统 失效 的 速率 . 因为 在 时 
间 ti1(Ui + Di) 中 将 有 n 次 失效 ， 有 由 人 由 条 信 拓 直 的 于 率 是 


系统 失效 的 速率 = im Br Et 


1 
让 em yy 


就 是 说 , 上 面 导致 直观 的 结果 , 平均 地 在 可 二 蕊 个 单位 时 间 有 一 次 失效 . 为 了 利用 这 
一 点 , 我 们 确定 部 件 i 的 一 次 失效 引起 系统 从 运行 转 为 失效 的 速率 . 现在 , 部 件 i 失 
效 时 , 如 果 其 他 部 件 的 状态 z1,… ,zi-1, zit1,… ,zn 使 得 Wliz) = 1, (0i,2) = 
则 系统 从 运行 转 为 失效 . 就 是 说 其 他 部 件 的 状态 必须 使 得 

$1i,2) — $0i,2) = 1 (9.30) 
因为 平均 地 部 件 i 在 每 1/Xi 十 1/ 个 时 间 单位 中 都 有 一 次 失效 , 由 此 推出 部 件 i 的 
失效 率 等 于 (1/ 和 十 1/p4)-! = XU/CA + Ai). 此外, 其 他 部 件 的 状态 将 以 概率 ? 

P{9(1i, X(00)) — $(0i, X(00)) = 1} 
= El¢(1i,X(00)) — $(0i,X(00))] 为 Bli,X(00)) — $(0i,X(00)) 


是 伯 努 利 随机 变量 
本 
使 得 方程 (9.30) 成 立 . 因此 , 将 上 面 总 起 来 考虑 , 我 们 看 到 
部 件 : 引起 系统 的 失效 率 一 Xe | ( 10 x 和) -ro 和] 
在 所 有 的 部 件 i 上 求 和 , 于 是 给 出 
asar- 吕 (cx 和 -es 


最 后 , 将 上 式 与 方程 (9.29) 置 为 相等 , 得 到 
@ XX(co) 理解 为 + 一 co 时 , 系统 处 的 随机 状态 . 一 译 者 注 
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矶 三 -开交 全 F (as) -r(x i) 3 
求解 方程 (9.28) 和 方程 (9.31), 我 们 得 到 
Ts 
| Ga 本 o | 


a te | (9.33) 


及 

"(is) 
同样 , 方程 (9.31) 导出 系统 的 失败 率 . 
注 在 建立 可 和 万 的 公式 时 , 我 们 并 没有 利用 运行 和 失效 时 间 的 指数 假定 ， 而 
事实 上 , 我 们 的 推导 是 有 效 的 , 并 且 当 万 和 万 都 完好 地 定义 (一 个 充分 条 件 是 所 
有 的 运行 和 失效 分 布 都 是 连续 的 ) 时 ,方程 (9.32) 和 方程 (9.33) 成 立 量 Xi 和 
h(i = 1,…,n) 分 别 表 示 平 均 寿命 和 平均 修理 时 间 的 倒数 . 
例 9.32 ”对 于 串联 系统 ， 


了 = (9.32) 


Hs 
T= I iti ul 
MiMi kK i 
Extralb 后 于 
I 
万 = -I i+ 1 
= 由 这 
I 全 十 入 
而 对 于 并 联系 统 ， > 
人 
区 le -+ 1 
“en ST 区 二 
乙 ， N+ Jr ph 直 厅 I 万 十 
人 
I m+A Fo-_l 
1-IL 和 Di 
”十 入 
上 面 的 公式 对 于 部 件 i 分 别 具 有 平均 运行 和 失效 时 间 1/A 和 Ili = 1 …'m) 的 
连续 的 运行 和 失效 分 布 的 系统 都 成 立 . 国 
带 有 暂缓 行为 的 串联 模型 


考虑 由 nn 个 部 件 组 成 的 一 个 串联 系统 , 并 且 假 设 只 要 一 个 部 件 失效 (而 因此 系 
统 失效 ), 这 个 部 件 立 刻 开始 修理 , 并 且 其 他 的 部 件 进入 一 个 暂缓 行为 的 状态 . 即 , 在 
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失效 的 部 件 修复 后 , 其 他 部 件 开始 在 失效 发 生前 的 相同 条件 下 恢复 运行 . 如 果 有 两 
个 或 更 多 的 部 件 同时 失效 , 则 它们 中 任意 选取 的 一 个 作为 失效 部 件 开始 修理 ; 其 他 
同时 失效 的 部 件 被 考虑 为 处 在 一 个 暂缓 行为 的 状态 , 而 当 修理 完成 时 , 它们 就 立刻 
进入 失效 时 期 . 我 们 假设 (不 计 任何 暂缓 行为 的 时 间 ) 部 件 ;运行 的 时 间 的 分 布 是 
局 均值 为 ui, 而 修理 分 布 是 Gi, 均值 为 di = 1 

为 了 确定 系统 在 工作 的 时 间 长 程 比例 , 我 们 作 推理 如 下 . 作为 并 始 , 考虑 系统 已 
经 运行 了 时 间 的 一 个 时 间 , 记 为 了 , 现在 , 当 系统 处 在 运行 时 部 件 i 的 失效 次 数 构 
成 一 个 具有 平均 间隔 时 间 w 的 更 新 过 程 . 所 以 , 由 此 推出 

部 件 ; 在 时 间 中 的 失效 次 数 二 
由 于 部 件 i 的 平均 修理 时 间 是 di, 从 上 式 可 推出 
在 时 间 中 部 件 ;的 总 修理 时 间 = 经 
所 以 , 在 系统 已 经 运行 了 时 间 + 期间, 系统 总 的 失效 时 间 近 似 地 是 
ty》 di/uu 
i=1 


因此 , 系统 处 于 运行 的 时 间 比 例 近 似 地 是 


t+t Di 十 /ui 
因为 当 我 们 让 上 变 大 时 , 这 个 近似 应 该 变 得 更 精确 , 由 此 推出 


系统 处 于 运行 的 时 间 比例 = 了 (9.34) 


这 也 说 明 
a 运行 Didi/u 
系统 的 失效 时 间 比 例 = 1 一 系统 处 于 运行 的 时 间 比 例 = T+ 
而 且 , 在 时 间 区 间 从 0 到 7, 已 经 投入 到 部 件 i 的 修理 时 间 比 例 近 似 地 为 
tdi /ui 
2itdi/us 


所 以 , 在 长 程 中 ， 
由 于 部 件 ; 引起 的 失效 的 时 间 比 例 = 
将 上 式 乘 以 系统 的 失效 时 间 比 例 , 得 出 
部 件 i 在 修理 的 时 间 比 例 = 二 
同样 , 由 于 只 要 任何 其 他 部 件 在 修理 , 部 件 7 将 处 于 暂 级 行为 状态 , 我 们 看 到 


di/wi 
Di du 
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部 件 处 于 斩 绥 行为 状态 的 时 间 比 例 = 记 当 2 


另 一 个 重要 的 量 是 系统 失效 的 长 程 速率 . 由 于 当 系 统 在 运行 时 , 部 件 i 以 速率 
1/ui 失效 , 而 当 系统 失效 时 它 未 必 和 失效, 由 此 推出 


E 系统 运行 时 间 的 比例 _ 1/w 
部 件 i 失效 的 速率 = = TT 
由 于 任何 一 个 部 件 失效 时 系统 失效 , 上 式 导致 i 
Se 
系统 失效 的 速率 = 了 二 a (9.35) 


如 果 将 时 间 轴 按 系统 运行 与 失效 划分 为 时 段 , 我 们 可 以 确定 运行 时 段 的 平均 长 
度 , 注意 到 , 如 果 U(t) 是 在 区 间 [0, 上 总 的 运行 时 间 , 而 如 果 Nt) 是 到 t 为止 失 
效 的 次 数 , 那么 
OE UB _), UW/t_ 1 
个 运行 时 期 的 平均 长 度 = Jim, 0 = lim (0 = 于 17 
其 中 最 后 的 等 式 用 到 了 方程 (9.34) 和 方程 (9.35) 用 类 似 的 方式 可 以 证 明 


_ Ed 
个 失效 时 段 的 平均 长 度 = 县 二 (9.36) 


习 题 


~ 


证 明 对 于 任意 结构 函数 5 有 
dz) = T1011,2) + (1— zi)9(0i, 7) 

其 中 

(152) = (zi Zn) (O62) = (T1077, Ti-1 0, Zire, Tn). 
2. 证 明 
(a) 车 8(0,0,…,0)=0 和 9(1,1,…,1) =1, 则 minzi < dz) < maxzi. 
(b) $(max(z,y)) > max($(7), p(y)) 
(©) $min(z,y)) < min($(2), O(y)) 
对 于 任意 结构 函数 $, 我 们 定义 对 偶 结构 函数 9? 为 8?(z) = 1 9(1 一 2). 
(a) 证 明 一 个 并 联 (串联 ) 系统 的 对 偶 是 一 个 串联 (并 联 ) 系统 . 
(b) 证 明 对 偶 结构 的 对 偶 是 原来 的 结构 . 
(c) n 中 大 系统 的 对 偶 是 什么 ? 
(d) 证 明 对 偶 系 统 的 最 小 道路 (切割 ) 集 是 原来 系统 的 最 小 切割 (道路 ) 集 . 
“4.， 写 出 对 应 于 下 列 图 9.16~9.18 的 结构 函数 . 
5. 求 对 应 于 下 列 图 9.19~9.20 的 最 小 道路 集 与 最 小 切割 集 . 
“6. 最 小 道路 集 是 {1,2,4}, {1, 3, 5} 和 {5,6}. 给 出 最 小 切割 集 . 
最 小 切割 集 是 {1,2,3}, {2, 3,4} 和 {3,5}. 问 最 小 道路 集 是 什么 ? 
给 出 图 9.21 中 结构 的 最 小 道路 集 与 最 小 切割 集 . 


豆 


9 


(a) 


(a) 


(b) 


图 9.21 
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» 


如 果 对 于 某 个 状态 向 量 z， 
glliz)=1， dotz)=0 
部 件 ; 称 为 关联 于 系统 , 否则 , 称 为 无 关联 的 . 
(a) 用 一 句 话 解释 一 个 部 件 是 无 关联 的 含义 . 
(b) 令 Ah1,…, 4。 是 一 个 系统 的 最 小 道路 集 , 而 以 S 记 部 件 的 集合 . 证 明 S = U;_, 4; 当 
且 仅 当 所 有 的 部 件 都 是 关联 的 . 
(e) 以 Cu …,Cx 记 最 小 切割 集 . 证 明 5S = U*_， Ci 当 且 仅 当 所 有 的 部 件 都 是 关联 的 . 
10. 以 志 记 第 i 个 部 件 失效 的 时 间 ; 以 Ts(t) 记 系 统 $ 的 失效 时 间作 为 向 量 t = (t1,… ,tn) 
的 函数 . 证 明 
max minti=76(t)= min maxt: 
1<JS<a i€EAS 1gj<k i€Cj 
其 中 C1,… ,Ck 是 最 小 切割 集 ，A1,… ,As 是 最 小 道路 集 . 
11. 给 出 习题 8 中 结构 的 可 靠 性 函数 . 
“12. 给 出 图 9.22 中 结构 的 最 小 道路 集 和 可 靠 性 函数 . 
1 4 


3 a 
图 9.22 
13. 令 r(p) 为 可 党性 函数 . 证 明 
T(p) = pir(li,p) + (1 — pi)r(0i,p) 
14. 通过 取 条 件 于 部 件 3 是 否 运行 , 计算 桥 联系 统 ( 见 图 9.11) 的 可 靠 性 函数 
15. 对 于 习题 4 中 给 出 的 系统 , 计算 可 靠 性 函数 的 上 界 和 下 界 (用 方法 2), 并 且 在 pi 三 1/2 时 
与 精确 值 比较 . 
16. 对 于 (a) 3 中 2 系统 , (b) 4 中 2 系统 , 用 两 种 方法 计算 r(p) 的 上 界 与 下 界 . 
(c) 将 这 些 界 与 精确 值 作 比 较 , 设 
(i) pi=0.5, 1 (ii) pi= 0.8, (iii) pi = 0.2. 
"17. 令 N 是 非 负 整数 值 的 随机 变量 . 证 明 
P{N > 0} > EN 


> EN3j 
并 且 解 释 怎样 使 用 这 个 不 等 式 导 出 可 靠 性 函数 的 附加 的 界 . 
i EIN?]= EIN?IN > OlP{N > 0} (为 什么 ?) 


> (EININ > 0])?P{N > 0} (为 什么 ?) 
现在 两 边 乘 以 P{N > 0} 
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18. 


19. 


20. 


21. 


“22. 


考虑 一 个 结构 , 其 最 小 道路 集 是 {1,2,3} 和 {3,4,5} 
(a) 最 小 切割 集 是 什么 ? 
(b) 如 果 部 件 的 寿命 都 是 独立 的 (0, 1) 均匀 随机 变量 , 确定 系统 寿命 小 于 1/2 的 概率 . 
以 Xi1,X2,…,Xn 记 独 立 同 分 布 随机 变量 ， 并 且 定 义 次 序 统计 量 X01),X(2),…， 
X(m 为 
XO) 三 XX1,X2,… ,Xn 中 第 i 个 最 小 者 ! 


证 明 如 果 X5 的 分 布 是 IFR, 那么 X(;) 的 分 布 也 是 IFR. 
提示 ， 将 它 与 这 一 章 中 的 某 一 个 例子 联系 起 来 . 
令 已 是 连续 分 布 函数 . 对 于 某 个 正 数 a, 由 
Gt) = (FW)® 
定义 分 布 函数 G. 求 G 和 下 分 布 的 失败 率 函数 和 c(t) 和 和 F(t) 之 间 的 关系 . 
考虑 下 述 图 9.23~9.26 中 4 个 结构 ， 
人 (0) 


( 记 ) (iv) 


2 3 


图 9.25 图 9.26 
令 甩 , Fa 和 Fs 是 对 应 部 件 的 失效 函数 , 它们 中 每 一 个 都 假定 是 IFR. (递增 失效 率 ). 令 下 
是 系统 的 失效 函数 . 所 有 的 部 件 都 是 独立 的 . 
(a) 若 五 = Fa = Fs, 对 于 哪 一 个 结构 FF 必须 是 IFR ? 给 出 理由 . 
(b) 车 肪 = 有 瑟 , 对 于 哪 一 个 结构 下 必须 是 IFR ? 给 出 理由 . 
(c) 车 五 关 瑟 关 有 丽 , 对 于 哪 一 个 结构 下 必须 是 IFR? 给 出 理由 . 
以 X 记 一 个 产品 的 寿命 . 假设 产品 已 经 到 达 年 龄 t. 以 Xt 记 它 的 剩余 寿命 , 并 且 定义 
F(a) =P{X: > a} 
言 之 , Fe(a) 是 一 个 t 年 的 旧 产 品 存活 一 个 附加 时 间 a 的 概率 . 证 明 


( 寺 其 中 忆 是 XX 的 分 布 了 数 


(a) A(a) = FE) 
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23. 


24. 


"25. 


26. 


27. 


28. 


29. 


“30. 


31. 


32. 
33. 


(b) IFR 的 另 一 个 定义 是 , 说 已 是 IFR, 如 果 瓦 (a) 对 于 一 切 a 对 上 上 递减. 证 明 当 严密 
度 时 , 这 个 定义 等 价 于 在 正文 中 给 出 的 定义 . 
通过 (a) 和 (b) 证 明 如 果 串 联系 统 的 每 一 个 (独立 的 ) 部 件 都 有 IFR 分 布 , 那么 系统 寿命 
本 身 也 是 IFR: 
(a) 证 明 
Mr(t) = DA) 


其 中 Ae(t) 是 系统 的 失败 率 函数 ; 而 Xi(t) 是 第 ;个 部 件 的 寿命 的 失败 率 函数 ， 
(b) 习题 22 中 给 出 的 IFR 的 定义 . 
证 明 如 果 已 是 IFR, 那么 它 也 是 IFRA, 并 且 通 过 反例 说 明 反 过 来 是 不 对 的 . 
我 们 说 5 是 分 布 已 的 一 个 p 百分点 , 如 果 FF(C) = p. 证 明 如 果 5 是 IFRA 分 布下 的 一 
个 p 百 分 点, 则 


其 中 


证 明 引 理 9.3. 
提示 ， 令 z= 二 y+65. 注意 当 0 < a < 1 时 f(t) = to 是 四 函数 并 且 利 用 对 于 凹 函数 
f(t 十 hh) 一 f(t) 关于 上 递减 
令 r(p) =7(p,p，…,p). 证 明 若 r(po) = po, 则 
rp) >p， 对 p>po 
Tr(p)<p 对 pspo 
提示 用 命题 9.2. 
当 两 个 部 件 的 寿命 分 别 是 (0, 1) 和 (0, 2) 上 均匀 分 布 时 , 求 这 两 个 部 件 的 串联 系统 的 平均 
寿命 , 对 于 并 联系 统 作 同 样 的 计算 . 
证 明 当 第 一 个 部 件 的 寿命 是 均值 为 /Ha 的 指数 分 布 , 而 第 二 个 部 件 的 寿命 是 均值 为 1/1z 


的 指数 分 布 时 , 两 个 部 件 的 并 联系 统 的 平均 寿命 是 
1 


+ 二 人 一 + 一 全 
+p (tpa)pa (ua 十 pa) 
当前 两 个 部 件 的 寿命 是 (0,1) 上 均匀 分 布 , 而 后 两 个 部 件 的 寿命 是 (0,2) 上 均匀 分 布 时 , 计 
算 4 中 3 系统 的 期 望 寿命 
证 明 当 每 个 部 件 的 寿命 的 均值 为 9 的 指数 分 布 时 , 一 个 n 中 上 系统 的 寿命 方差 为 


1 
0 辫 去 
在 9.6.1 节 中 , 证 明 超过 c* 的 Xi 的 期 望 个 数 等 于 1. 
令 Xi 是 均值 为 8+ 2i (i = 1,2,3) 的 指数 随机 变量 . 用 9.6.1 节 的 结果 得 到 Elmax Xi] 的 
上 界 , 然后 与 当 X; 是 独立 随机 变量 时 的 精确 结果 作 比 较 . 
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34， 对 9.7 节 中 的 模型 , 对 于 一 个 n 中 大 结构 , 计算 (i) 平均 运行 时 间 ，(ii) 平均 失效 时 间 ，(ii) 
系统 的 失败 率 . 
35. 证 明 组 合 恒等式 
n—l n n n 2 
CO 
1 
(a) 对 i 用 归纳 法 . 
(b) 对 i 用 倒 向 归纳 法 一 一 就 是 说 , 先 对 i 二 n 证 明 它 , 然后 对 i = 假定 它 成 立 , 并 且 证 


明 这 蕴涵 对 于 i 二 上 一 1 它 是 正确 的 . 
36， 验证 方程 (9.36). 
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第 10 章 “布朗 运动 与 平稳 过 程 


10.1 布朗 运动 


本 章 首先 讨论 对 称 随机 游 动 , 对 称 随机 游 动 在 每 个 单位 时 间 等 可 能 地 向 左 或 向 
右 走 一 个 单位 的 一 步 . 就 是 说 , 这 是 一 个 具有 Piiti = 1/2 = Pii-i(i=0, 士 1,…) 的 
马尔 可 夫 链 ， 现 在 假设 通过 在 越 来 越 小 的 时 间 区 间 取 越 来 越 小 的 步 长 来 加 快 这 个 
过 程 . 如 果 我 们 现在 以 正确 的 方式 趋 于 极限 , 得 到 的 就 是 布朗 运动 . 

更 确切 地 说 , 假设 每 个 At 时 间 单 位 等 概率 地 向 左 或 向 右 移动 大 小 为 Az 的 一 
步 . 如 果 以 X(t) 记 在 时 刻 t 的 位 置 , 那么 

X(t) = Az(Xa 十 … 十 Xie/ag) (10.1) 

其 中 


po { +1， 如 果 长 度 为 Ar 的 第 ; 步 是 向 右 的 


一 1， 如 果 长 度 为 Az 的 第 i 步 是 向 左 的 
且 [t/At] 是 小 于 或 等 于 t/At 的 最 大 整数 , 此 处 假定 Xi 是 独立 的 , 并 且 
POX =1}=P{(X = -1} =3 
因为 ELXi] = 0, Var(Xi) = E[X8] = 1, 由 方程 (10.1) 看 到 
EX(t)] =0, Var(X(t) = (Az)? | 天 (10.2) 
现在 令 Az 和 At 趋 于 0. 然而 , 我 们 必须 以 使 结果 的 极限 过 程 是 非 平凡 的 方式 进 
行 (例如 , 如 果 我 们 令 Az = At, 并 令 At 一 0, 那么 , 从 上 面 我 们 看 到 E[X(t)] 和 
Var(X(t)) 两 者 都 将 趋 于 0, 因此 X(t) 将 以 概率 1 等 于 0). 如 果 对 于 某 个 正常 数 0， 
我 们 令 Az = oVAt, 那么 由 方程 (10.2) 知 , 当 At 一 0 时 
' E[X(t)] =0, Var(X(t)) 一 ot 
我 们 现在 列 出 当 取 Az = oVAt, 然后 令 At 一 0 时 , 极限 过 程 的 直观 性 质 . 由 
方程 (10.1) 及 中 心 极限 定理 可 知 以 下 似乎 是 合理 的 . 
(i) X(t) 是 均值 为 0, 方差 为 o2t 的 正 态 随机 变 基 . 此 外 , 因为 随机 游 动 在 不 重 
又 的 时 间 区 间 改 变 的 值 是 独立 的 , 我 们 有 
(这 {X(t),t > 0} 有 独立 增 量 , 即 对 于 所 有 的 怕 < 妇 < … < 如 
X(tn) — X(tn-1), X(tn-1) 一 天 (加 2) 天 ( 轨 ) 一 天 二) 大人) 
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是 独立 的 . 最 后 , 因为 随机 游 动 在 任意 时 间 区 间 的 位 置 改 变 分 布 只 依赖 于 这 个 区 间 
的 长 度 , 其 表现 为 

(ii) {X(b,t > 0} 有 平稳 增 基 , 因此 XUt+ s) 一 X(t) 的 分 布 不 依赖 于 t. 我 们 现 
在 已 经 做 好 如 下 正式 定义 的 准备 . 
定义 10.1 如 果 

(i) X(0) = 0; 

(ii) {X(b,t> 0} 有 平稳 独立 的 增 基 ; 

( 阁 ) 对 于 任意 二 > 0, X(t) 是 均值 为 0, 方差 为 ct 的 正 态 随机 变 其 . 
那么 称 随机 过 程 {X(t),t > 0} 为 布朗 运动 过 程 . 

布朗 运动 过 程 , 有 时 称 为 维 纳 过 程 , 是 在 应 用 概率 论 中 最 重要 的 随机 过 程 之 一 . 
它 起 源 于 物理 中 作为 布朗 运动 的 描述 . 这 个 现象 , 以 发 现 它 的 英国 植物 学 家 Robert 
Brown 的 名 字 命 名 , 是 由 全 部 浸没 在 液体 或 气体 中 的 微粒 展示 的 运动 . 此 后 , 这 个 
过 程 已 经 有 益 地 用 于 这 些 领 域 , 诸如 拟 合 度 的 统计 检验 , 分 析 证 券 市 场 的 价格 水 平 
和 其 子 力学 . 

布朗 运动 现象 的 第 一 个 解释 由 爱 因 斯 坦 在 1905 年 给 出 . 他 证 明了 布朗 运动 可 以 用 
假定 浸入 的 粒子 是 连续 地 受 周 围 介质 中 分 子 的 冲击 来 解释 . 然而 , 潜在 于 布朗 运动 的 随机 
过 程 的 上 述 简明 定义 是 由 维 纳 在 1918 年 开始 的 一 系列 文章 中 给 出 的 . 

当 o = 1, 这 个 过 程 称 为 标准 的 布朗 运动 .因为 任意 布朗 运动 可 以 令 B(t) = 
X(t)/o 而 转化 为 标准 的 布朗 运动 , 除非 特别 声明 , 本 章 我 们 都 假设 o = 1. 

由 随机 徘徊 的 极限 (方程 (10.1)) 解释 布朗 运动 可 知 , X(t) 必须 是 t 的 连续 函 
数 . 为 了 验证 其 正确 性 , 我 们 必须 证 明 以 概率 为 1 地 有 


im (X(t+h) — X(t)) =0. 
虽然 此 式 的 严格 证 明 超 出 了 本 书 的 范围 , 但 是 以 下 论证 是 可 信 的 . 注意 到 随机 变量 
X(t 十 hh) 一 X(t) 的 均值 为 0, 方差 为 h, 从 而 看 出 当 h 一 0 时 收敛 到 均值 为 0, 方差 
为 0 的 一 个 随机 变 基 . 这 就 是 说 , X(t+ hh) 一 X(t) 趋 于 0 是 合理 的 , 由 此 导出 连续 


性 . 
虽然 X(t) 是 t 的 连续 函数 的 概率 为 1, 但 是 它 具 有 处 处 不 可 微 的 有 趣 性 质 . 要 


弄 明 白 为 什么 是 这 样 , 注意 荆 人 士 久 一 二 多 具有 均值 0, 方差 六. 因为 当 有 一 0 时 
2 区 一 X 鸭 的 方差 收敛 到 oo, 这 个 比值 不 收敛 也 在 意料 之 中 ， 
因为 X(9) 是 均值 为 0, 方差 为 的 正 态 随机 变量 , 它 的 密度 函数 由 


和 
fi(z) = 7 
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给 出 . 对 于 所 < …< tn 为 了 得 到 X(5), 和 (加 ) ,和 (tm) 的 联合 密度 函数 , 首先 注 


意 一 组 等 式 
X(t1) 一 zl 


X(tz) =z2， 


X(tn) =zn 


它们 等 价 于 
X(t1) 一 z1， 


X(t2) — X(t1) =72 —T1, 


X(tn) — X(tn-1) = 一 Zn-1 
然而 , 由 独立 增 其 假设 推出 X(b),X(tz) 一 入 归 )…,X(tn) 一 X(tn-1) 是 独立 
的 , 并 且 由 平稳 增 其 假设 , X(tk) 一 六 (tk-1) 是 均值 为 0, 方差 为 tk 一 t-1 的 正 态 随 
机 变 莽 . 因此 , X(t1), 关 (t2),…,，X(tn) 的 联合 密度 函数 由 
f(T1 72, En) = fa (Ti) fet (T2 — T1) fi tn (Tn — Tn-1) 
1[z? , (rz2—z1)? (mm 一 Zn) 
on {3 攻 + ta—t1 Sh 如 一 如 -1 ]} (10.3) 


(27)™/2[t(t2 — t1) (如 一 如 -1)]172 


由 这 个 方程 ， 原则 上 可 以 计算 任意 想 要 的 概率 . 例如 ， 假 设 我 们 要 求 对 给 定 
X(t) = B 时 , X(s) 的 条 件 分 布 , 其 中 s < t. 那么 这 个 条 件 密度 是 


flolB) = 了 闪 


= Kiexp{—7z*/2s — (B — 7)?/2(t — s)} 
于 
:hp {ge)} 


(z — Bs/t)? 
-mn{ -4} 


其 中 Ki、K2 和 Ks 不 依赖 z. 因此 , 从 上 式 我 们 看 到 , 对 于 s < t, 给 定 X(t) = 
时 , X(s) 的 条 件 分 布 是 正 态 分 布 , 其 均值 和 方差 由 
E[X(s)|X(t) = 可 = 3B， Var(X(s)|X(t) = B) = i(t —s) (10.4) 
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例 10.1 在 有 两 人 比赛 的 自行 车 赛 中 , 以 Y(t) 记 当 100t% 的 竞赛 完成 时 , 从 内 道 
出 发 的 竞赛 者 领先 的 时 间 数 量 (以 秒 计 ), 并 且 假 设 {Y(t),t > 0} 可 以 有 效 地 用 方差 
参数 为 o? 的 布朗 运动 建 模 . 
(a) 如 果 在 竞赛 的 中 点 , 内 道 的 竞赛 者 领先 o 秒 , 问 她 取胜 的 概率 是 多 少 ? 
(b) 如 果 内 道 的 竞赛 者 在 竞赛 中 以 领先 o 秒 获胜 , 问 她 在 竞赛 的 中 点 领先 的 概 
率 是 多 少 ? 
解 
(a) P{Y(1) > 0lY(1/2) = o} 
=P{Y(1) —Y(1/2) > -olY (1/2) = 0} 
=P{Y(1) 一 了 (1/2) > -o} 由 独立 增 量 性 
=P{Y (1/2) > -o} 由 平稳 增 量 性 


-P { 0 -可 = (V3) ~ 0.9213 
其 中 @(z) = P{N(0,1) < z} 是 标准 正 态 分 布 函 数 . 

(b) 因为 必须 计算 P{Y (1/2) > 0|Y(1) = o}, 让 我 们 首先 确定 , 在 s < t 时 ， 
给 定 Y(t) = C 时 Y(s) 的 条 件 分 布 ， 因 为 {X(t),t > 0} 是 标准 布朗 运动 , 其 中 
义 (t) = 了 Y(t)/o, 我 们 从 方程 (10.4) 得 到 , 给 定 X(t) = C/o 时 X(s) 的 条 件 分 布 是 均 
值 为 sCVte 且 方 差 为 st - s)/t 的 正 态 分 布 . 因此 ,给 定 Y(t) =C 时 Y(s) =oX(s) 
的 条 件 分 布 是 均值 为 sC/t 且 方 差 为 rzs(t - s)/t 的 正 态 分 布 . 因此 ， 


P{Y(1/2) > 0IY(1) = c} = P{N(c/2,c2/4) > 0} = ®(1) ~ 0.8413 国 


10.2 ” 击 中 时 刻 、 最 大 随机 变量 和 赌 徒 破产 问题 
以 T 记 布朗 运动 首次 击 中 a 的 时 刻 . 当 a > 0 时 , 我 们 通过 考虑 P{X(t) > a} 
并 取 条 件 于 是 否 有 T。 < t 来 计算 P{T < 如. 这 给 出 
P{X(G > 4} =P{X(t) > alTs <t}P{T, < 
+P{X(t) > alT, > t}P{T, > (10.5) 


现在 如 果 T。< t, 那么 过 程 在 [0,4] 的 某 个 点 击 中 a, 并 且 由 对 称 性 , 它 等 可 能 地 或 
者 比 a 大 或 者 比 a 小 . 即 


P{X(t) > alT <t} = 3 


因为 方程 (10.5) 右边 的 第 二 项 显然 等 于 0 (因为 由 连续 性 , 过 程 的 值 不 可 能 还 
没有 击 中 a 而 大 于 a). 我 们 看 到 
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P{Ts < t} =2P{X(t) > a} 
二 区 一 z2/21 
= | e td7 
-2 eo 
= 遍 | Y /2dy，a>0 (10.6) 
对 于 a < 0, 由 对 称 性 , Tu 的 分 布 与 T_。 的 分 布 相同 . 因此 从 方程 (10.6) 我 们 
得 到 本 
-2 | 
V2 jayw 
另 一 个 重要 的 随机 变量 是 过 程 在 [0,4] 中 达到 的 最 大 值 . 得 到 它 的 分 布 如 下 : 对 
于 a>0 


P{T,s <t} = e-Y/2dy (10.7) 


P{ gag X(s) >0} =P{Ts。 < 由 连续 性 
=2P{X(t) > a} 由 (10.6) 
2 er 

去 上。 3 

我 们 现在 考虑 布朗 运动 在 击 中 一 B 前 先 击 中 4 的 概率 , 其 中 4 > 0,B >0. 为 了 
计算 它 , 我 们 利用 将 布朗 运动 解释 为 对 称 随机 游 动 的 极限 . 我 们 先 回忆 赌 徒 破产 问 
题 的 结果 ( 见 4.5.1 节 ), 当 每 一 步 或 者 增加 或 者 减少 一 个 距离 Az 时 , 对 称 随机 游 动 
在 减少 到 B 前 先 增加 到 4 的 概率 (由 方程 (4.14), 以 N = (4+B)/Az，i= B/Az) 
等 于 BAz/(A+ B)Az = B/(A+B). 

因此 , 令 Az 一 0, 得 到 


P {在 减少 到 B 前 先 增加 到 4} = 4 


10.3 ”布朗 运动 的 变形 


10.3.1 “漂移 布朗 运动 
我 们 称 {X(t),t > 0} 是 漂移 系数 为 上 4 和 方差 参数 为 o? 的 布朗 运动 , 如 果 
(i) X(0) = 0; 
(ii) {X(t),t > 0} 有 平稳 独立 增 基 ; 
(党 ) 匀 (t) 有 均值 为 jt, 方差 为 c2t 的 正 态 分 布 . 
一 个 等 价 定义 是 令 {B(t),t > 0} 是 标准 布朗 运动 , 然后 定义 
X(t)=oB(t) + pt 


从 这 个 表述 可 以 得 出 X(t) 也 是 上 的 连续 函数 . 
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10.3.2 ”几何 布朗 运动 
如 果 {Y(t),t > 0} 是 漂移 系数 为 4 和 方差 参数 为 o? 的 布朗 运动 , 那么 由 
X(t)=er®) 
定义 的 过 程 {X(b,t > 0} 称 为 几何 布朗 运动 . 
对 于 一 个 几何 布朗 运动 过 程 {X(b}, 让 我 们 计算 , 给 定 过 程 直至 时 刻 s 的 历史 
时 , 过 程 在 时 刻 t 的 期 望 值 . 即 , 对 于 s < t, 考虑 EB{X(t)|X(w),0 < u < s}. 现在 
E[X()IX(u),0 < u < s]=Ele” dNY(u),0 < ug s] 
=EleY()+Y()-Y()|Y(u),0 < u < s] 
=eY(s)EleY -YY(u),0 < u < s] 
一 X(s)Eley(O-YC)] 
其 中 倒数 第 二 个 等 式 得 自 Y(s) 给 定 的 事实 , 而 最 后 的 等 式 得 自 布朗 运动 的 独立 增 
其 性质. 现在 , 一 个 正 态 随机 变量 W 的 矩 母 函 数 由 
Eleew] 该 eaE[W]+a?Var(W)/2 
给 出 . 因此 , 由 于 Y(t) 一 Y(s) 是 均值 为 u(t 一 s) 和 方差 为 o?(t 一 s) 的 正 态 随机 变 
基 , 置 a = 1, 由 此 推出 ， 
Elex(O-Y(9)] 号 ep(t 一 +(t 一 s)o212 
于 是 , 我 们 得 到 
E[X(O)IX(w,0 < u < s] = 和 (s)edt-9U+o /2) (10.8) 
几何 布朗 运动 在 股票 相对 于 时 间 的 价格 的 建 模 中 很 有 用 , 当 你 感觉 价格 百 分 
比 变化 是 独立 同 分 布 时 ， 例 如 , 假设 X, 是 某 个 股票 在 时 刻 n 的 价格 ， 那 么 , 假 
设 Xn/Xn-i(n > 1) 是 独立 同 分 布 也 许 是 合理 的 . 令 区 = Xn/Xn-1, 所 以 Xn = 
了 Xn-1. 由 这 个 等 式 迭 代 给 出 
Xn = Yn Xn 
=YnYn iYn -2Xn-3 


=YnYn-1:.*YiXo 

于 是 加 

ln(Xn) = DIn(¥Yi) + In(Xo) 
i=1 


由 于 In¥(i > 1) 是 独立 同 分 布 的 , {In Xn} 也 将 如 此 , 在 适当 地 规范 化 之 后 , 近似 地 
是 具有 漂移 的 布朗 运动 , 所 以 {Xn} 近似 地 是 几何 布朗 运动 . 


512 第 10 章 布朗 运动 与 平稳 过 程 


10.4 ”股票 期 权 的 定价 


10.4.1 ”期 权 定 价 的 示例 


对 于 在 不 同时 期 收 到 或 者 支付 钱 的 情形 , 我 们 必须 考虑 到 钱 的 时 间 价 值 . 就 是 
说 , 在 将 来 时 刻 t 得 到 的 钱 v, 不 如 立刻 得 到 的 钱 v 值钱 . 原因 在 于 , 如 果 我 们 立刻 
得 到 钱 w 那么 它 可 以 带 利息 地 贷 出 , 从 而 在 时 刻 t 比 v 更 值钱 . 为 了 考虑 这 些 , 我 
们 假设 在 时 刻 t 赚 得 钱 的 数量 v 在 时 刻 0 的 价值 (也 称 为 现 值 ) 是 ve“ 其 a 常 
称 为 折 现 因子 . 在 经 济 学 的 术语 中 , 折 现 函数 e “: 的 假定 , 等 价 于 假定 我 们 可 以 在 
单位 时 间 赚 取 100a% 的 连续 复 利率 . 

现在 我 们 考虑 对 于 在 一 个 将 来 时 刻 以 固定 价格 购买 一 种 股票 期 权 的 简单 定价 
模型 . 

假设 一 种 股票 每 股 的 现 值 是 100 美元 , 并 且 在 一 个 时 期 后 , 它 的 现 值 或 者 是 200 
美元 , 或 者 是 50 美元 ( 见 图 10.1). 应 该 注意 到 在 时 刻 1 的 价格 是 现 值 (或 时 刻 0 的 ) 
价格 . 就 是 说 , 如 果 折 现 因子 是 a, 那么 在 时 刻 1 的 实际 价格 , 或 者 是 200e", 或 者 是 
50e”. 为 了 使 记号 简单 , 我 们 假设 所 有 给 出 的 价格 都 是 在 时 刻 0 的 价格 . 

200 


a 
es 


50 
时 刻 0 的 价格 时 刻 1 的 价格 
图 10.1 


假设 对 于 任意 y, 我 们 可 以 在 时 刻 0 以 价格 cy 购买 期 权 , 以 便 在 时 刻 1 以 每 股 
150 美元 的 价格 购买 y 股 股票 . 那么, 若 你 确实 购买 了 这 个 期 权 , 而 且 股票 升值 为 
200 美元 , 则 你 将 在 时 刻 1 行使 这 个 期 权 , 且 在 所 购买 的 y 股 期 权 单位 中 的 每 一 股 
赚 得 200 - 150 = 50 美元 . 另 一 方面 , 若 在 时 刻 1 的 价格 降 到 50 美元 , 则 这 个 期 权 
在 时 刻 1 没有 价 伪 . 此 外 , 你 可 以 在 时 刻 0 以 价格 100z 购买 z 个 单位 的 股票 , 它 在 
时 刻 1 的 价值 , 或 者 是 200z 美元 , 或 者 是 50z 美元 . 

我 们 假设 z 或 y 都 可 以 为 正 也 可 以 为 负 (或 者 0). 就 是 说 , 你 可 以 购 进 或 者 卖 
出 股票 或 期 权 . 例如 , 若 > 是 负 的 则 你 将 卖 出 一 z 股 股票 , 导致 你 有 一 100z 的 回报 ， 
而 你 负责 在 时 刻 1 以 每 股 50 美元 或 者 200 美元 购 进 一 z 股 股票 . 

我 们 有 兴趣 确定 期 权 合适 的 单位 价格 c. 特别 地 , 我 们 将 证 明 , 除非 c = 50/3， 
将 总 有 一 个 购买 的 组 合 能 得 到 正 的 获 利 . 


100 
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为 了 证 明 这 一 点 , 假设 在 时 刻 0 我 们 
购 进 z 单位 股票 ， ” 购 进 y 单位 期 权 
其 中 z 和 2 (它们 可 以 或 者 正 , 或 者 负 ) 待定 . 在 时 刻 1, 我 们 持 有 的 价值 依赖 股票 
的 价格 , 它 由 下 式 给 出 
价值 = { 


200z + 50y， 若 价格 是 200 上 


50z， 若 价格 是 50 


上 面 的 公式 成 立 是 因为 , 注意 到 若 股票 价格 是 200, 则 z 单位 股票 值 200z, 而 y 单 
位 的 期 权 的 价值 是 (200 一 150)y. 另 一 方面 , 若 股票 价格 是 50, 则 z 单位 股票 值 50z， 
而 y 单位 期 权 没有 价值 . 现在 假设 不 管 在 时 刻 1 股票 的 价格 是 什么 , 我 们 总 选取 y 
使 上 面 的 两 个 值 相同 . 就 是 说 , 我 们 选取 y 使 得 
200z+50y = 50z 从 而 y = -3z 

(注意 y 的 符号 与 x 相反 , 所 以 若 x 是 正 , 作为 结果 , z 单位 的 股票 在 时 刻 0 购 进 , 则 
3z 单位 的 股票 期 权 在 同时 卖 出 . 类 似 地 , 若 > 是 负 , 则 -z 单位 的 股票 在 时 刻 0 卖 
出 , 而 -3z 单位 的 股票 期 权 在 时 刻 0 购 进 .) 

于 是 , 由 y = -3z, 在 时 刻 1 我 们 持 有 的 价值 是 

价值 = 50z 
因为 原来 购买 z 单位 股票 和 -3z 单位 期 权 的 价格 是 
原价 格 = 100z 一 3zc， 
我 们 看 到 , 在 交易 中 我 们 的 获 利 是 
获 利 = 50z 一 (100z - 3zc) = z(3c 一 50) 

所 以 , 车 3c = 50, 则 获 利 为 0; 另 一 方面 , 车 3c 关 50, 则 我 们 可 以 保证 有 一 个 正 的 获 
利 (不 管 在 时 刻 1 股票 的 价格 是 什么 ), 只 要 在 3c > 50 时 令 z 为 正 , 在 3c < 50 时 令 
2 为 负 . 

例如 , 如 果 每 个 期 权 的 单位 价格 是 c = 20, 那么 购 进 1 个 单位 的 股票 (z = 1) 
且 同 时 卖 出 3 个 单位 的 期 权 (y = -3) 在 开始 我 们 付出 价格 为 100 - 60 = 40. 然 
而 , 这 个 持 有 在 时 刻 1 的 价格 是 50, 不 管 股票 价格 升 至 200, 或 者 降 到 50. 于 是 , 得 
到 了 一 个 有 保证 的 利润 10. 类 似 地 , 如 果 每 个 期 权 的 单位 价格 是 c = 15, 那么 卖 出 
1 个 单位 的 股票 (z = -1) 且 同 时 购 进 3 个 单位 的 期 权 (y = 3) 导致 一 个 初始 获 利 
100 - 45 = 55. 另 一 方面 , 这 个 持 有 在 时 刻 1 的 价格 是 -50. 就 得 到 一 个 有 保证 的 
利润 5. 

一 定 赢 的 下 注 方案 称 为 套利 .于 是 , 正如 我 们 已 经 看 到 的 , 不 会 导致 套利 的 期 
权 价格 e 只 能 是 c= 50/3. 
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10.4.2 ”套利 定理 


考虑 一 个 试验 , 其 可 能 结果 的 集合 是 S = {1,2,…,m}. 假设 有 n 种 赌注 . 如 果 
试验 的 结果 为 j, 而 以 金额 z 下 注 于 赌注 i 时, 则 赚 得 回报 zri(j). 换 句 话 说 , mi(-) 
是 每 个 单位 下 注 于 赌注 i 的 回报 函数 . 在 一 个 赌注 上 的 下 注 金额 允许 或 是 正 , 或 是 
负 , 或 是 0. 

一 个 下 注 方案 是 一 个 向 基 z = (z1,…,zn), 以 zl 解释 为 在 赌注 1 上 的 下 注 ， 
Z2 为 在 赌注 2 上 的 下 注 , … ,zn 为 在 赌注 n 上 的 下 注 . 如 果 试 验 的 结果 为 j, 那么 
下 注 方案 = 的 回报 是 

从 民 的 回报 = 2 72ziriO) 
i=1 


下 面 的 定理 说 明 , 或 者 存在 一 个 在 所 有 可 能 结果 的 集合 上 的 概率 向 其 p = (pi1,…， 
Pm), 使 得 所 有 的 赌注 的 期 望 回报 是 0, 或 者 存在 一 个 保证 获 利 为 正 的 下 注 方案 . 
定理 10.1( 套 利 定理 ) ”以 下 恰 有 一 条 是 正确 的 : 
或 者 

(i) 存在 一 个 概率 向 量 p= (Pp1,… ,pm), 使 得 


Dpiri(j) =0， 对 于 一 切 主 = 1 
j=1 


或 者 
(这 存在 一 个 下 注 方案 z= (ZT1,… ,In), 使 得 


ziri(7) > 0， 对 于 一 切 了 = 1 如 
i=1 


换 身 话说 , 如 果 X 是 试验 的 结果 , 那么 套利 定理 说 明 , 或 者 存在 一 个 概率 向 量 

P= (pl,…,pm), 使 得 
Eplri(X)]=0， ”对 于 一 切 i=1,…,n 

否则 存在 导致 一 定语 的 一 个 下 注 方案 . 
注 ”这 个 定理 是 (线性 代数 中 的 ) 分 离 超 平面 的 定理 的 推论 , 它 常用 作证 明 线 性 规 
划 对 偶 定 理 的 一 个 技巧. 

线性 规划 理论 可 以 用 来 确定 一 个 保证 有 最 大 回报 的 下 注 策略 . 假设 每 个 赌注 的 
下 注 金额 的 绝对 值 必须 小 于 或 等 于 1. 为 了 确定 导致 最 大 地 保证 赢利 ( 称 若 利 v) 的 
向 量 z, 我 们 必须 选取 z 和 u 使 得 在 服从 约束 条 件 


ziri0) >uw， 对 于 了 一 1 
i=1 
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下 , 使 v 最 大 . 这 个 最 佳 化 问题 是 一 个 线性 规划 , 且 可 以 由 标准 的 方法 求解 (例如 
用 单纯 形 方法 )， 套 利 定理 导致 最 佳 值 v 将 是 正 的 , 除非 存在 一 个 概率 向 量 p = 
(p14… ,pm), 使 对 于 一 切 i 二 1,…,n 有 721PjTi(j) =0. 

例 10.2 ”在 某 些 情形 , 下 注 类 型 只 允许 是 选取 一 种 基本 结果 i,i = 1,…,m, 并 且 
打赌 试验 的 基本 结果 是 i. 由 这 样 的 下 注 回 报 , 常用 术语 引述 为 “优势 如 果 基 本 结 
果 ;i 的 优势 是 oi( 常 常 写 成 “oi 比 1”) ( 即 赔 率 为 ob), 那么 , 若 试验 的 基本 结果 是 i 
则 一 个 单位 的 下 注 将 回报 oi, 而 在 其 他 情形 的 回报 是 -1. 即 

、_ | o， 若 7=i 
mi(O) -{ _1， 其 他 
假设 优势 设置 为 o,……,om。 为 了 使 得 不 一 定 准 赢 , 就 必须 有 一 个 概率 向 其 p = 


(Pp1,…,Pm), 使 得 
0= Eplri(X)] = oipi ~ (1 —p;) 


就 是 说 , 必须 有 六 
WE oi 
由 于 pi 的 和 必须 为 1, 这 意味 着 没有 套利 的 条 件 是 
ya +oi)- =1 
i1 


于 是 , 如 果 设 置 的 优势 使 学 ;(1 + ob)-: 关 1, 那么 准 赢 是 可 能 的 . 例如 , 假设 有 3 个 
可 能 的 基本 结果 , 而 其 优势 如 下 


结果 优势 
1 1 
小 8 流 
3 3 


就 是 说 , 对 于 结果 1 的 优势 是 1 比 1, 对 于 结果 2 的 优势 是 2 比 1, 对 于 结果 3 的 优 
势 是 3 比 1. 由 于 

1 1 Li 

3 


准 赢 是 可 能 的 . 一 种 可 能 是 下 注 一 1 于 基本 结果 1 (所 以 你 或 者 赢 1, 如 果 基 本 结果 
不 是 1, 或 者 输 1, 如 果 基 本 结果 是 1), 而 下 注 一 0.7 于 基本 结果 2, 并 且 下 注 -0.5 于 
基本 结果 3. 如 果 试验 结果 是 1, 那么 我 们 赢 -1+ 0.7+ 0.5 = 0.2; 如 果 试 验 结果 是 
2, 那么 我 们 赢 1 一 1.4+0.5 = 0.1; 如 果 试 验 结果 是 3, 那么 我 们 赢 1+0.7 一 1.5 = 0.2. 
因此 , 在 所 有 的 情形 我 们 都 赢得 一 个 正 的 金额 . a 
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注 ”如果 站:(1 二 01)-!1 关 1, 那么 下 注 方案 
_ (1+o0)-! 
~ 1- 5(l+o0)-Y 
将 总 是 导致 怡 为 1 的 获 利 . 
例 10.3 ”我 们 重新 考虑 上 一 节 期 权 定 价 的 例子 , 其 中 一 股 股票 的 初始 价格 是 100， 
而 在 时 刻 1 的 现价 或 者 是 200, 或 者 是 50. 可 以 在 时 刻 0 以 每 股 c 的 价格 购买 期 权 ， 
以 便 在 时 刻 1 以 现价 每 股 150 购 进 股票 . 问题 在 于 如 何 设置 c 使 得 不 可 能 准 赢 . 

在 这 节 的 正文 中 , 试验 的 基本 结果 是 在 时 刻 1 的 股票 的 价格 . 于是, 有 两 种 可 
能 的 结果 . 也 有 两 种 不 同 的 赌注 : 购 进 (或 卖 出 ) 股票 和 购 进 (或 卖 出 ) 期 权 . 由 套利 
定理 , 如 果 有 一 个 概率 向 基 (p,1 一 p) 使 两 种 赌注 下 的 期 望 回报 是 0, 则 将 不 是 准 赢 . 

购 进 一 个 单位 股票 的 回报 是 

回报 ~ { 200 一 100 = 100， 若 在 时 刻 1 的 价格 是 200 
50 一 100 = -50， 若 在 时 刻 1 的 价格 是 50 


因此 , 如 果 p 是 在 时 刻 1 价格 为 200 的 概率 , 那么 
E [回报 | = 100p 一 50(1 一 中 
置 它 等 于 0 导致 p = 1/3. 即 , 使 赌注 1 导致 回报 为 0 的 唯一 概率 向 基 (p,1 -7p) 是 
(1/3,2/3). 
现在 , 购买 一 股 期 权 的 回报 是 


六 [| 


50 一 c， 若 价格 是 200 


ma-{ _c， 车 价 格 是 50 


因此 , 当 p= 1/3 时 的 期 望 回报 是 


也 回 报 | = 50 一 9 了 一 3 志 加 


二 三 = 
3 3 

于 是 , 由 套利 定理 推出 , 唯一 不 使 准 赢 的 c 值 是 c= 50/3, 它 验 证 了 10.4.1 节 中 的 结 
论 ， 图 
10.4.3 ”布莱克 -斯 科 尔 斯 期 权 定价 公式 


假设 股票 现在 的 价格 是 X(0) = zo, 且 以 X(t) 记 它 在 时 刻 t 的 价格 . 假设 我 们 
有 兴趣 于 时 间 区 间 0 到 的 股票 . 假定 折 现 因子 是 a( 等 价 于 利率 是 100a% 的 连续 
复 利 ), 所 以 在 时 刻 t 股票 价格 的 现 值 是 eX(t). 

我 们 可 以 将 股票 价格 按时 间 的 变化 过 程 当 作 一 种 试验 , 这 样 , 试验 的 结果 就 是 
函数 X(t)(0 < t < T) 的 值 . 对 于 任意 的 s <t, 可 用 的 赌注 类 型 是 , 我 们 可 以 对 时 刻 
3 观察 这 个 过 程 , 然后 在 时 刻 t 以 价格 X(t) 购 进 (或 卖 出 ) 这 些 股 票 . 此 外 , 我 们 假 
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设 可 以 在 时 刻 0 购 进 任意 N 种 不 同 的 期 权 . 期 权 i, 每 股价 格 ci, 给 我 们 在 时 刻 去 
以 每 股 Ki (i = 1 N) 的 价格 购 进 股票 的 权利 . 
假设 我 们 要 确定 ci 的 值 , 使 得 不 存在 一 个 准 赢 的 下 注 策略 . 假定 套利 定理 可 以 
推广 (处 理 上 述 情形 , 其 中 试验 的 基本 结果 是 一 个 函数 ), 则 推出 不 存在 准 赢 策略 , 当 
且 仅 当 存在 一 个 在 基本 结果 集合 上 的 概率 测度 , 使 得 在 这 个 测度 下 所 有 的 赌注 都 有 
期 望 回报 0. 令 P 是 在 基本 结果 集合 上 的 一 个 概率 测度 . 首先 考虑 对 于 一 个 时 刻 s 
观察 股票 而 后 购 进 (或 卖 出 ) 一 股 , 以 在 时 间 刻 t(0 < s < t < 7 了 ) 卖 出 (或 购 进 ) 为 目 
的 的 赌注 . 付 于 这 个 股票 的 金额 现 值 是 e-%*X(s), 而 接受 到 的 金额 现 值 是 e-%*X(t). 
因此 , 当 了 是 在 X(t)(0 < t < T) 上 的 概率 测度 时 , 为 了 这 个 赌注 的 期 望 回报 是 0， 
我 们 必须 有 
Eple-“:X(t)|X(wW,0 <u < s]=e-"*X(s) (10.9) 


现在 考虑 购买 一 个 期 权 的 赌注 . 假设 这 个 期 权 给 我 们 在 时 刻 t 以 价格 K 购买 一 股 
股票 的 权利 . 在 时 刻 t, 这 个 期 权 的 价值 如 下 : 
. _{ XW-K, 若 X() > 天 
而 4 基 权 的 价值 0, 车 X() < 天 
即 , 在 时 刻 t 期 权 的 价值 是 (X(t) 一 K)+. 因此 , 期 权 的 价值 现 值 是 e-**(X(t) 一 K)+. 
如 果 是 期 权 (在 时 刻 0) 的 价格 , 我 们 看 到 , 为 了 使 购买 的 期 权 有 期 望 ( 现 值 ) 回报 
0, 必须 有 
Eple-et(X(-K)+] =e (10.10) 
由 套利 定理 ,如果 我 们 能 够 找到 在 基本 结果 集合 上 的 一 个 概率 测度 P 满足 方程 
(10.9), 那么 , 车 在 时 刻 t 以 固定 的 价格 K 购买 一 个 股票 的 期 权 价格 c 由 方程 (10.10) 
给 出 , 这 时 不 可 能 有 套利 . 另 一 方面 如 果 对 于 给 定 的 ci,i = 1,…, NN, 没有 概率 测度 
PP 满足 方程 (10.9) 和 等 式 
GEple “(X(t)— Ki)t], i=Le,N 
那么 准 赢 是 可 能 的 . 
假设 
X(t) = zoey © 
其 中 {Y(t),t > 0} 是 具有 漂移 系数 J: 和 方差 参数 o? 的 布朗 运动 . 即 , {X(t),t > 0} 
是 一 个 几何 布朗 运动 过 程 ( 见 10.3.2 节 ). 由 方程 (10.8), 对 于 s < t, 我 们 有 
E[X(O)IX(wW,0 < u < s] =X(s)et to/2) 


因此 , 如 果 选 取 J 和 o? 使 得 
H+o/2=@ 
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那么 方程 (10.9) 将 满足 . 即 , 令 P 是 由 随机 过 程 {zoe* 中 ,0 < t < 0 决定 的 概率 测 
度 , 其 中 {Y(b)} 是 漂移 系数 上 和 方差 参数 o? 的 布朗 运动 , 是 /+ 人 = oa 则 方程 
(10.9) 满足 . 
由 上 面 推出 , 如 果 把 在 时 刻 t 以 固定 的 价格 K 购买 一 个 股票 的 期 权 定价 为 
c=Eple “(X(t) — K)!] 
那么 就 没有 套利 的 可 能 性 . 由 于 X(t) = zoe” 中 ,其 中 Y(t) 是 均值 pt 和 方差 c2t 的 
正 态 随机 变 基 , 我 们 看 到 


oo 
CR =| (zoey — K)+ @-(y-pt)?/2t0° dy 
-oo 


1 
V2nto? 
1 Fe (H/o? dy 


oo 


-| (zoe! 
ln(K/zo) 


作 变 基 替 换 w = 从 可 得 
ceot = oo 上 ewVie-w /2dw 一 Kk. 大 | e-v /2dw (10.11) 
其 中 
In(K/z0)— pt 
ovi 
现在 ， 


上 ecuvie-uz/zdu=etoz/2 Lf er-(e-ovB?/2du 
oo 1) >a} 
=etc"/2?P{N(0,1) > a — ovVt} 
=e!”"/2P{N(0,1) < —(a —oVi)} 
=e!”"/29(o Vt — a) 
其 中 N(m,v) 是 均值 m 和 方差 v 的 正 态 随机 变 基 , 而 $ 是 标准 正 态 分 布 函 数 . 
于 是 , 我 们 从 方程 (10.11) 看 到 
cert = Zoe!t+o"t/2p(o Vt— a) — KG(-a) 
利用 /+ 2/2 = oa 并 且 令 0 = 一 a, 我 们 可 将 它 写 为 
c=Zzop(oVt+b) — Ke-°tp(b) (10.12) 
共 帅 at — ot/2— In(K/zo) 
ovt 
由 方程 (10.12) 给 出 的 期 权 价格 公式 , 依赖 于 股票 的 初始 价格 zo, 期 权 执 行 的 时 
刻 t, 期 权 执行 的 价格 KK, 折扣 (或 利率 ) 因子 a 和 值 "?( 称 为 波动 率 ). 注意 对 于 o? 


b= 
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的 任意 值 , 如 果 期 权 按 方程 (10.12) 中 的 公式 定价 , 则 没有 套利 的 可 能 性 . 然而 , 因为 
很 多 人 相信 股票 的 价格 实际 上 遵循 几何 布朗 运动 ( 即 X(t) = zoe* 中, 其 中 Y(t) 是 
参数 /和 o? 的 漂移 布朗 运动 ) 就 自然 地 建议 以 取 参 数 o? 为 在 几何 布朗 运动 模型 
假定 下 方差 参数 的 估计 值 (参见 下 面 的 注 ), 按 方程 (10.12) 中 的 公式 定价 期 权 . 做 了 
这 些 之 后 , 公式 (10.12) 以 布 菜 克 -斯 科 尔 斯 期 权 价格 的 估价 而 著名 有 趣 的 是 这 个 
估价 并 不 依赖 于 漂移 参数 /而 只 依赖 于 方差 参数 0?. 

如 果 期 权 本 身 可 以 交易 , 那么 公式 (10.12) 可 以 用 来 设置 其 价格 使 套利 没有 可 
能 性 . 如 果 在 时 刻 s 股票 的 价格 是 X(s) = zs, 那么 一 个 (t, K) 期 权 的 价格 ( 即 一 个 
在 时 刻 t 以 价格 K 购买 一 个 单位 的 股票 期 权 ) 将 是 在 方程 (10.12) 中 以 t+ 一 s 取代 
t, 并 且 以 rz 取代 zo 
注 “如果 我 们 在 任意 时 间 区 间 观 察 一 个 方差 参数 o? 的 布朗 运动 过 程 , 那么 就 可 以 
在 理论 上 得 到 o? 的 一 个 任意 精确 的 估计 . 假设 我 们 观察 这 样 一 个 过 程 {Y(s)} 一 段 
时 间 t. 那么 , 对 于 固定 的 t, 令 N= [t/ 有 ,并 且 午 

Wi =Y(h) —Y(0), 
Wz =Y(2h) — Y(h), 


Ww =Y(Nh) —Y(Nh—h) 
那么 , 随机 变量 Wi,…, Wiv 是 独立 同 分 布 的 具有 方差 ho? 的 正 态 随机 交 量 .现在 
我 们 利用 以 下 的 事实 ( 见 3.6.4 节 ): (N 一 1)S?/(o?h) 具有 自由 度 为 N 一 1 的 卡 方 分 
布 , 其 中 5? 是 由 总 
S22=D (Wi—W)/(N-1) 
i=1 


定义 的 样本 方差 . 因为 大 个 自由 度 的 卡 方 分 布 的 期 望 值 和 方差 分 别 等 于 上 和 2k, 我 
们 看 到 
E[(N 一 1)52/(czi] = N 一 1 
Var((N — 1)S?/(o?h)) =2(N —1) 


由 此 我 们 得 到 E[S2/ 朋 =o? 与 Var(S?/h) = 2o4/(N 一 1). 因此 , 当 我 们 让 h 交 得 越 
来 越 小 时 (所 以 N = [t/ 问 变 得 越 大 ),c2 的 无 偏 估计 方差 变 得 任意 小 . 
方程 (10.12) 并 不 是 可 以 定价 期 权 使 其 不 存在 套利 可 能 的 唯一 途经 . 令 {X(t)， 
0<t<7T)} 是 对 于 s<t 满 足 
Ele-°:X(D)IX(uw),0 < u < s] =e-°X(s) (10.13) 
的 任意 随机 过 程 ( 即 满足 方程 (10.9)). 通过 令 在 时 刻 t 以 价格 天 购买 一 股 股票 的 
期 权 价 格 c 等 于 
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c=Ele- “(X(t) — K)+] (10.14) 
由 此 推出 没有 套利 可 能 性 . 
除了 几何 布朗 运动 外 , 满足 方程 (10.13) 的 另 一 种 类 型 的 随机 过 程 得 到 如 下 . 令 
六 ,72，,… 是 具有 相同 均值 上 的 一 系列 独立 随机 变 基 , 并 且 假 设 此 过 程 与 一 个 速率 
为 入 的 泊 松 过 程 {N(t),t > 0} 无 关 . 令 
N(t) 


X(t)= zo II ¥ 
el 
利用 恒等式 


N(s) Nt) 


XGOD=zoTIIK II 5 


认 1 j=N(s)+1 


以 及 泊 松 过 程 独立 增 基 的 假定 , 我 们 看 到 , 对 于 s <t 


N(t) 
EIX(t)IX(wW,0o<ugs=X()E| II % 
j=N(s)+1 


取 条 件 于 s 和 上 之 间 的 事件 数 , 得 到 


N(t) oo 
E II yy i Dnre Mo ee s)]"/n! = €—Mt-s)(1-p) 


j=N(s)+1 n=0 


因此 
E[X(t)|X(u),0 < u < s]=X(s)e—\ -sn) 

于 是 , 如 果 我 们 选取 入 和 人 满足 和 (1 一/) = 一 a, 方程 (10.13) 就 得 以 满足 . 所 以 , 如 
果 对 于 任意 和 值 , 我 们 让 Yi 具有 相同 均值 4 = 1+ a/X, 而 后 按 方程 (10.14) 定价 期 
权 , 那么 , 就 不 存在 套利 的 可 能 性 . 
注 如果 {X(t),t > 0} 满足 方程 (10.13), 那么 , 过 程 {e-otX(t),t > 0} 称 为 鞭 . 于 
是 , 当 {etX(t),t > 0} 遵循 某 个 坎 的 概率 规律 时 , 使 得 期 权 的 期 望 获 利 为 0 的 任 
意 期 权 定价 方法 将 导致 不 存在 套利 . 

也 就 是 说 , 如 果 我 们 选取 任意 获 过 程 {Z(t)}, 且 令 一 个 (t,KK) 期 权 的 价格 c 为 

ci Elerat(eatZtt) - K)+] = El(Z(t) ~ Ke-abt] 

那么 , 不 会 准 赢 . 

另外 , 当 我 们 不 考虑 赌注 的 类 型 , 其 中 在 时 刻 s 购买 的 一 股 股票 不 是 在 一 个 固 
定 的 时 刻 卖 出 , 而 是 在 依赖 于 股票 运动 的 某 个 随机 时 刻 卖 出 , 用 关于 黄 的 同样 结果 ， 
可 以 证 明 这 样 的 赌注 的 期 望 回 报 也 等 于 0. 
注 ”套利 定理 的 一 个 变形 是 菲 内 蒂 在 1937 年 首先 给 出 的 . 菲 内 蒂 的 结果 的 一 个 更 
为 一 般 的 版 本 在 参考 文献 3 中 给 出 , 套利 定理 是 其 中 一 个 特殊 情形 . 
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10.5 ”漂移 布朗 运动 的 最 大 值 


对 具有 漂移 系数 上 和 方差 参数 o? 的 布朗 运动 {X(y),y > 0}, 定义 
4 


MO) = ag, X(y) 
为 过 程 直至 时 刻 t 的 最 大 值 . 

我 们 要 通过 推导 在 给 定 X(t) 的 值 时 M(t) 的 条 件 分 布 , 来 确定 M(t) 的 分 布 , 
为 此 , 我 们 先 证 明 , 在 给 定 X(t) 的 值 时 , {X(y),0<y 和 寺 的 分 布 不 依赖 于 人. 这 就 
是 说 , 给 定 过 程 在 时 刻 t 的 值 时 , 它 直至 时 刻 t 的 历史 的 分 布 不 依赖 于 4. 

我 们 从 一 个 引 理 开始 . 

引 理 10.1 若 鲁 ,…,Yh 是 均值 0 方差 v2 的 独立 同 分 布 正 态 随机 变量 , 则 在 给 定 
LY =z 时 六,…,Y 的 分 布 不 依 玉 0. 

证 明 ”因为 在 给 定 i Yi = z 时 次 的 值 由 角 ,…,Y-1 确定 , 故 只 须 考虑 在 给 
定 可 C=z 时 六 ,…,Yn-1 的 条 件 密度 . 令 X = 于 六 :到 得 到 此 条 件 密度 如 下 


fe 的 汪 介 本 
现在 因为 


Y= n= Yn X= = 1 = Yn Yn = = 
由 此 推出 
0 2) = fy Ys Ys 人 nbZ 一 到 
= fy (0) fy (Yn-1) fy ( = 到 
其 中 最 后 的 等 号 因为 如,…,Y% 是 独立 的 . 因此 , 利用 X = ;1 Yi 是 均值 nb 方差 
nv? 的 正 态 随机 变量 , 我 们 得 到 


其 中 K 不 依赖 9. 将 上 式 中 的 平方 展开 , 且 将 不 依赖 9 的 一 切记 为 一 个 常数 ， 
就 可 知 
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A oie Se fy (7 — Dr yi) fv (1) fy (yn-1) 
Yi Yn XY Yn-1) fx(z) 


@-(z-T ry -0)*/2v? TI ee 
ECG=n6)2/2no5 


1 n—l 2 
-i 


n-l 


+ Dm- oP- (ene/n|} 


i=1 


= 


fy yalX (V1 Yn il) 


n—l n—l 
-Ko { -去 [-*(:- 守 4) +0 -20 Du+(n- 10 +20r ng")} 
i=1 


tnl 


=K’ 


其 中 K' = K’(v,t,…,yn-1,7) 是 一 个 不 依赖 9 的 函数 . 从 而 证 明了 结论 . 图 
注 ”假设 随机 变量 六 ,… ,Yh 的 分 布依 赖 某 个 参数 9. 再 假设 存在 半 ，… ,Yh 的 某 
个 函数 D(Yi,…,Yn), 使 得 在 给 定 D(Yi,…, Yn) 时 , 了 ，,…，Yn 的 条 件 分 布 不 依赖 
9. 在 统计 中 将 D(Yi,…,Yn) 称 为 9 的 充分 统计 量 . 假如 我 们 要 用 数据 2 了 
来 估计 9 的 值 因为 在 给 定 D(Yi，,…，,Y%n) 的 值 时 , Yi，,…, Yn 的 条 件 分 布 不 依赖 9， 
由 此 推出 , 如 果 已 知 D(Yi，,….,，Y%) 的 值 , 由 一 切 资料 值 了 ,……,Y。 并 不 能 得 到 有 关 
9 的 附加 信息 . 于 是 我 们 前 面 的 引 理 证 明了 独立 同 分 布 正 态 随 机 变量 的 资料 值 的 和 
是 它们 均值 的 充分 统计 量 .( 因为 知道 此 和 的 值 等 价 于 知道 忆 蕊 1 好/m 的 值 , 后 者 
称 为 样本 均值 , 统计 中 的 通用 术语 是 , 样本 均值 是 正 态 总 体 均 值 的 充分 统计 量 . ) 图 
定理 10.2 设 {X(t),t > 0} 是 具有 漂移 系数 /i 和 方差 参数 a2 的 布朗 运动 过 程 ， 
则 在 给 定 六 (t) = 并 时 , 对 于 一 切 J 过 程 {[X(y),0 < y<t} 有 相同 的 条 件 分 布 . 
证 明 ”对 于 固定 的 mw, 令 去 = 证 mi = 1,…,n. 为 了 证 明定 理 , 我 们 要 先 证 明 , 在 
给 定 X(t) 的 值 时 , X (5)… (tn) 的 条 件 分 布 不 依赖 上 为 此 , 令 = X(t1), Yi = 
六 (i) 一半 (ti-1),i 二 2,…,n, 同时 注意 六 ,…, Yn 是 独立 同 分 布 具有 均值 9 = jpt/n 
的 正 态 随机 变 甚 . 因为 沁 i_1 Yi; = X(t), 由 引 理 10.1 推出 , 在 给 定 X(t) 时 , ，…,，Y 
的 条 件 分 布 不 依赖 于 作 因为 知道 半 ,…,Y 等 价 于 知道 关 ()… (如 ), 这 就 导出 了 
结论 . 更 
现在 我 们 推导 , 在 给 定 X(t) 的 值 时 M(t) 的 条 件 分 布 . 

定理 10.3 对 于 y>z 


P{M(t) > YX(t) = z} = ea/to y>0 
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证 明 因为 X(0) = 0, 由 此 推出 M(t) > 0, 所 以 当 y = 0 时 结论 正确 ( 因为 在 此 情形 
两 边 都 等 于 0). 所 以 我 们 假设 y > 0. 因为 由 定理 10.2 推出 P{M(t) > y|X(t) = z} 
不 依赖 于 的 值 , 我 们 可 假设 上 = 0. 现在 以 Ty 记 布 朗 运动 首 达 y 值 的 时 刻 . 注 
意 由 布朗 运动 的 连续 性 推出 , 事件 M(t) > y 等 价 于 事件 T， < t, 这 是 因为 由 连续 
性 可 知 , 在 过 程 可 能 超过 正 值 y 前 就 必须 首次 经 过 这 个 值 . 现在 , 以 h 记 一 个 满足 
>z+ 六 的 小 正 数 . 那么 


P{M() > yz < X(t) < z+h}=P{T, <t,z < X(t) < z+h} 
=P{z < X(t) <z+hlT, <t}P{T, < 


现在 , 在 给 定 T, < t 时 , 若 在 时 刻 T, 和 t 之 间 过 程 在 到 达 y 后 减少 yz 一 h 与 
4 一 z 之 间 的 一 个 基 , 则 事件 z < X(t) < z +h 就 会 发 生 . 随 之 就 有 
P{z < X(t) <z+hlT, <t}=P{2y—z—h< X(t) <2y— zlT, <t} 
由 它 可 知 
P{M(t) 2 yz < X(t) < z+h} =P{2y—z—h< X(t) < 2y— zlT, <t} 
xP{T, < 

=P{2y—7z—h< X(t) < 2y-z,T, <t} 
=P{2y—z—h< X(t) < 2y—z} 


其 中 最 后 的 方程 得 自 , 因为 y > z +h 列 涵 2y -zx 一 h >y, 故而 由 布朗 运动 的 连续 
性 ,如 果 2y 一 x 一 h< X(t), 那么 T, <t. 因此 
P{M(t) > ylz < X(t) < z+h)} = De 二 
fxw(2y — Th+o(h) 
fx (T)h + o(h) 
fx((2y— 7)+o(h) h 
fx (7) +o(h)/h 


其 中 fxio 是 X(t) 的 密度 函数 , 它 是 具有 均值 0 方差 o? 的 正 态 随机 变 其 的 密度 函 
数 . 令 上 式 中 一 0, 得 出 

_ 1 fxw(2y—7) 

P{M(t) > y|X(t) = 7} = x 


2 /2t02 
@—(2y—z)?/2t0 


ez21toz 


= e-2y(y 一 z)/to2 国 
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以 2 记 一 个 标准 正 态 随机 变量 , 而 以 $ 记 其 分 布 函 数 , 令 
$(z)=1— $(z) =P{2Z >7} 


我 们 现在 能 得 出 
Mp0 zy em (ue) +5 (Sh) 
证 明 取 条 件 于 X(t), 用 定理 10.3, 得 到 

PlM() 2 =| PM 2X =z}xole)ar 


y oo 
=| PM >yXO=ayxoclaz+| fx 
中 外 
『 -wv-no 1 
La 


i dr+P{X(t) >Y) 
LO” 


__ 1 —2y?/to? 让 1 2 
a e Lp 02 2ptzr 


一 0) }az +P{X(t) > yy} 


1 @— (Ay?+p°t2)/2to? 


“Vaio 
4 1 2 
光 | ew 仁 记 cc —2z(pt+ 2)} dz+P{X(t) > 访 


现在 有 
22 — 2z(pt + 2y) = (2 — (pt+2y))* — (pt + 2y)? 

给 出 

P{M(t) > y} =e- + tt)/210 下 -ept-2g)2/2to2dr 

2nto J- 
+P{X(t) >y} 
人 芝 冯 党 从 如 王 2 dz = ovtidu 
1 ovt 
就 给 出 了 
P{M(t) 2 Y} =e%/"” 遍 2 -w?/2qw + P{X(H) > 


e/g 


evn/o? 5 


从 +P{X(t) >y)} 


(5 
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这 样 就 完成 了 证 明 . 上 

在 定理 10.3 的 证 明 中 , 我 们 以 Ty 记 布朗 运动 首次 等 于 0 的 时 刻 . 此 外 , 如 前 所 
述 , 布朗 运动 的 连续 性 蕴涵 了 , 对 y > 0, 过 程 在 时 刻 t 前 曾 到 过 y, 当 且 仅 当 最 大 过 
程 在 t 前 至 少 是 y. 因此 ,对 y>0 有 


TteM(t)>y 4 
利用 引 理 10.1, 得 出 
Py < 和 -ees (时 和 +3 (和 ),v>0 
10.6 白 噪 声 
以 {X(t),t > 0} 记 标准 布朗 运动 , 且 令 f 为 在 区 间 [a,4] 有 连续 导数 的 一 个 函 


b 
数 ,定义 随机 积分 | 7(DdX(D) 如 下 ， 
[sax lm SEI) XE) 039 
a j=l 
max(ti—ti—1)—0 
其 中 a=to < <… < 如 = 是 区 间 [a, 引 的 一 个 划分 . 利用 恒等式 (分 部 积分 公 
式 应 用 于 和 ) 


HE) — X(ti)] 


i=]1 
=f(bD)X(b) — f(a)X(a) — DX) (ts) — f(ti-1)] 
i=l 
我 们 看 到 ， 
| faxtd = 0x - s(x) -| xoarg (10.16) 
b 

方程 (1016) 通常 用 作 | 7(DdX (9) 的 定义 . 

通过 利用 方程 (10.16) 的 右边 , 在 假定 期 望 与 极限 的 可 交换 的 情况 下 , 我 们 得 到 

b 
sl| 7oaxOg| = 
同样 
Var 区 f(t XG) 一 x = 和 f(t Var(X(t) — X(t) 
i=1 i=1 


= f2(ti_) (ti — ti1) 
i=1 


526 第 10 章 布朗 运动 与 平稳 过 程 


其 中 第 一 个 等 式 来 自 布朗 运动 的 独立 增 基 性 质 . 因此 , 我 们 在 上 式 中 取 极限 , 由 方程 
(10.15) 我 们 得 到 和 
Var (| roaxg] =| 2(t)dt 


注 上 面 给 出 了 一 族 量 {dX(t),0 < t < co} 的 运算 含义 , 将 它 看 成 作用 到 函数 了 
得 到 什 [roaxow 的 一 个 算 子 . 这 称 为 白 躁 声 变换 , 或 者 更 为 一 般 地 , {dX(t),0 < 
t < o0} 称 为 白 咯 声 , 因为 它 可 以 想象 为 一 个 时 变 函 数 f 在 白 噪声 的 介质 中 传播 导 
致 (在 时 间 6b 的 ) 一 个 输出 J rwaxe. 


例 10.4 ”考虑 一 个 单位 质量 的 粒子 悬 在 一 种 液体 中 , 且 假 设 液 体 有 一 种 黏 性 力 以 
与 现 速度 成 比例 地 阻止 粒子 的 速度 . 另外 , 我 们 假设 速度 以 白 噪 声 的 常数 倍 瞬 时 改 
变 . 即 如 果 以 V(t) 记 粒 子 在 时 刻 t 的 速度 , 假设 
V'(t) =—BV(t) + aX'(t) 
其 中 {X(t),t > 0} 是 标准 布朗 运动 . 这 可 以 写成 如 下 的 
eBt[V’(t) + BV(t)] = aestX'(t) 


从 而 
eV) = aeptX'(t) 
因此 , 积分 得 到 , 
eBtV(t) =V(0) +a | eBsX'(s)ds 
0 
所 以 


V(t) =V(0)e-Bt + “| e-Alt-s)dx(s) 
0 
因此 , 由 方程 (10.16) 得 
t 
V(t) =V(0)e-St+a |xo 一 | X(s)Be-B(t-s)ds 
0 


1 10.7 高 斯 过 程 


我 们 由 下 述 定义 开始 . 
定义 10.2 ”随机 过 程 {X(t),t > 0} 称 为 高 斯 过 程 , 或 者 正 态 过 程 , 如 果 对 于 一 切 
刀 ,… tn 天 () (如 ) 具有 多 维 正 态 分 布 . 

如 果 {X(b,t > 0} 是 布朗 运动 过 程 , 那么 因为 X(t1),… ,X(tn) 中 的 每 一 个 都 
可 以 表示 为 独立 的 正 态 随机 变 基 X(t1), X(t2) 一 X(t1), X(t3) 一 于 (可 ) ,大 (加 ) 一 
X(tn-1) 的 线性 组 合 , 由 此 推出 布朗 运动 是 高 斯 过 程 . 
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因为 多 维 正 态 分 布 完全 由 它 的 边缘 均值 与 协 方差 值 确定 ( 见 2.6 节 ), 由 此 推出 
标准 布朗 运动 也 可 以 定义 为 高 斯 过 程 具有 E[X(t)] = 0, 且 对 于 s < 
Cov(X(s), X(t)) = Cov(X(s), X(s) + X(t) — X(s)) 
= Cov(X(s), X(s)) + Cov(X(s), X(t) — X(s)) 
= Cov(X(s),X(s)) ”由 独立 增 量 
一 如 为 Var(X(s))=s (10.17) 
令 {X(b,t > 0} 是 一 个 标准 布朗 运动 , 且 考 虑 在 0 与 1 之 间 取 条 件 于 X(1) =0 
的 过 程 值 . 即 , 考虑 条 件 随 机 过 程 {X(t),0 < t < 1|X(1) = 0}. 由 于 X(t1),…… ,X(tn) 
的 条 件 分 布 是 多 维 正 态 分 布 ,由 此 推出 这 个 条 件 过 程 是 一 个 高 斯 过 程 ， 称 为 布朗 
桥 ( 因 为 它 在 时 间 0 和 1 都 被 系 住 了 ). 让 我 们 计算 它 的 协 方差 函数 ， 因 为 , 由 方 


程 (10.4 
E[X(s)|X(1)=0]=0， 对 s<1 


所 以 对 于 s <t < 1, 我 们 有 
Cov((X(s), X(t)IX(1) =0)=EIX(Gs)XGIXG)=g] 
=E[E[X(s)X(t)|X(t), X(1) = OIX(1) = 0] 
=E[X(t)E[X(s)|X()IX() = 9] 
=E [X()SX(WIX() =0] 。 由 (10.4) 
=7E[X?(O)|X(1) = 上 


= itl 一 t) 由 (10.4) 
=s(1—t) 
于 是 , 布朗 桥 可 以 定义 为 均值 为 0 和 协 方差 函数 为 s(1 -t),s < t 的 一 个 高 斯 过 程 . 
这 导致 了 得 到 这 样 的 过 程 的 另 一 种 途径 . 
命题 10.1 ”如果 {X(b,t> 0} 是 一 个 标准 布朗 运动 , 那么 当 Z(t) = X(t) 一 tX(1) 
时 , {Z(t),t > 0} 是 一 个 标准 布朗 桥 过 程 . 
证 明 ”因为 {Z(t),t > 0} 显然 是 一 个 高 斯 过 程 , 我 们 只 需要 验证 ELZ(b] = 0 以 及 
当 s<t 时 Cov(Z(s),2Z(b) = s(1 一 切 . 前 者 是 显然 的 , 而 后 者 是 由 于 
Cov(2(s), 2(t)) =Cov(X(s) — sX(1), X(t) —tX(1)) 
=Cov(X(s), X(t)) — tCov(X(s), X(1)) 
—sCov(X(1), X(t)) + stCov(X(1), X(1)) 
=s— st—st+i+st 
=s(1—) 
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这 样 就 完成 了 证 明 . a 
如 果 {X(b,t> 0} 是 布朗 运动 , 那么 由 


t 
Z(t) = | X(s)ds (10.18) 


定义 的 过 程 {2(t),t > 0} 称 为 积分 布朗 运动 . 作为 这 种 过 程 如 何 可 能 在 实际 中 出 现 
的 一 种 说 明 , 假设 我 们 对 商品 在 全 部 时 间 的 价格 建 模 感 兴趣 . 以 Z(t) 记 在 时 间 t 的 
价格 , 比 之 于 假定 {Z(t)} 是 一 个 布朗 运动 (或 者 假定 In Z(t) 是 一 个 布朗 运动 ), 我 
们 更 愿意 假定 Z(t) 改变 的 速率 遵循 一 个 布朗 运动 . 例如 , 我 们 可 以 假定 商品 的 价格 
变动 率 是 当前 的 通 涨 率 , 想象 为 像 布朗 运动 那样 变化 . 因此 

t 

20) =X(t), 2(t)=2(0) +| X(s)ds 
0 
由 布朗 运动 是 高 斯 过 程 这 个 事实 推出 , {2(b),t > 0} 也 是 高 斯 过 程 . 为 了 证 明 
它 , 首先 回忆 Wi,…, Wn 称 为 具有 多 维 正 态 分 布 , 如 果 它 们 可 以 表示 为 
Wi= aD, t= ,Nn 
j=1 


其 中 Uj(j = 1,…,m) 是 独立 的 正 态 随机 变 基 . 由 此 推出 Wi,…, Wn 的 任意 部 分 
和 也 是 联合 正 态 分 布 ， 现 在 , Z(t1),…,2Z(tn) 是 多 维 正 态 的 事实 可 以 通过 将 方程 
(10.18) 中 的 积分 写 为 近似 和 的 极限 来 证 明 . 

因为 {2(t),t > 0} 是 高 斯 过 程 , 由 此 推出 它 的 分 布 由 它 的 均值 和 协 方差 函数 所 
描述 . 现在 , 当 {X(t),t > 0} 是 标准 布朗 运动 时 , 我 们 来 计算 它们 . 

t t 
E[Z(t)] =E J xe] = 中 E[X(s)Jds=0 

对 于 sst 


Cov[2(s), 2(t)] =E[2Z(s)2(t)] = 也 | X(ydy | x(wau] 


上 [ xxtodd| 


E 
。 =| | Ex Xelavar 


t 
min(y,u)dydu 由 (10.17) 


ll 
SG 8 
5 
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10.8 ”平稳 和 能 平稳 过 程 


一 个 随机 过 程 {X(t),t > 0} 称 为 平稳 过 程 , 如 果 对 于 一 切 mw s, 刀 ,…,tn, 随机 
变量 XX(1),… ,X(tn) 和 天 (6 十 s),…,， 关 (tn 十 s) 有 相同 的 联合 分 布 . 换 句 话说 , 一 
个 过 程 是 平稳 的 , 如 果 在 选取 任意 固定 点 s 作为 原点 , 过 程 都 有 相同 的 概率 规律 . 平 
稳 过 程 的 两 个 例子 是 : 

0) 一 个 遍历 的 连续 时 间 马 尔 可 夫 链 {X(t),t > 0}, 当 


P{X(0)=j}=P, j2>0 


其 中 { 忆 ,7 > 0} 是 极限 概率 . 

(i) {XGt> 0} 当 XGO = N(t+ 工 ) 一 NN(t),t > 0, 其 中 工 > 0 是 一 个 固定 的 
常数 , 而 {N(b),t > 0} 是 一 个 速率 为 和 的 泊 松 过 程 . 

这 些 过 程 中 的 第 一 个 是 平稳 的 , 因为 它 是 一 个 按 其 极限 概率 选取 初始 状态 的 马 
尔 可 夫 链 , 因此 可 以 看 作 是 从 时 刻 oo 开始 观察 的 一 个 遍历 马尔 可 夫 链 . 因此 , 这 个 
过 程 在 观察 开始 后 在 时 刻 s 的 延续 , 正 是 此 马尔 可 夫 链 在 时 刻 co + s 开始 的 延续 ， 
显然 它 对 于 所 有 的 。 有 相同 的 分 布 . 第 二 个 例子 (其 中 X(t) 表示 泊 松 过 程 在 与 
t+ 二 之 间 事件 的 个 数 ) 的 平稳 性 得 自 泊 松 过 程 的 平稳 性 和 独立 增 基 假 定 ,这 殖 涵 着 
一 个 泊 松 过 程 在 任意 时 刻 s 的 延续 仍然 是 一 个 泊 松 过 程 . 
例 10.5( 随 机 电报 信号 过 程 ) ”以 {N(b),t > 0} 记 一 个 泊 松 过 程 , 且 令 Xo 独立 于 
这 个 过 程 , 并 且 使 P{Xo = 1} = P{Xo = -1} = 1/2. 定义 X() = Xo(-DwG， 那 
么 {X(b),t > 0} 称 为 随机 电报 信号 过 程 . 为 了 看 到 它 的 平稳 性 , 首先 注意 到 在 任意 
时 刻 4, 无论 Nt) 是 什么 值 , 由 于 Xo 等 可 能 地 或 者 是 正 1 或 者 是 负 1, 所 以 X(t) 
等 可 能 地 或 者 是 正 1 或 者 是 负 1. 因此 , 由 于 一 个 泊 松 过 程 超过 任意 时 间 的 延续 仍 
然 是 泊 松 过 程 , 所 以 {X(t),t > 0} 是 一 个 平稳 过 程 . 

让 我 们 计算 随机 电报 信号 的 均值 和 协 方差 函数 


E[X(t)] = 了 [Xo(-DxG] 
= 了 E[XojE[(-1)x(GO] 由 独立 性 
三 0 因为 E[Xo] = 0， 
Cov[X(t), X(t+ s)] = E[X(t) X(t+ s)] 
a E[X2(—1)NO+NG+s)] 
i 卫 [( 一 1)2N(O( 一 1)NG+e) 一 NGO] 
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E[(-D)wGe+s-NG] 
= 了 -DO 


一 e-2)e (10.19) 


对 于 随机 电报 信号 的 一 个 应 用 , 考虑 一 个 粒子 以 常数 单位 的 速度 沿 直线 移动 ， 
并 且 假设 粒子 涉及 的 撞击 以 泊 松 速率 发 生 . 同样 假设 粒子 每 次 遭受 撞击 都 要 变 
为 反 向 运动 ， 所 以 , 如 果 Xo 表示 粒子 的 初始 速度 , 那么 它 在 时 刻 t 的 速度 ( 记 之 
为 XX()) 由 X(t) = Xo(-D>G 给 出 , 其 中 N(t) 记 粒 子 直到 时 刻 t 为 止 的 撞击 次 
数 . 因此 , 如 果 Xo 等 可 能 地 或 者 是 正 1 或 者 是 负 1, 且 独 立 于 {N(t),t > 0}, 那么 
{X(t),t > 0} 是 一 个 随机 电报 信号 过 程 . 如 果 现 在 令 
D(t)= | X(s)ds 


那么 D(t) 表示 粒子 在 时 刻 t 从 它 在 时 刻 0 的 位 置 的 位 移 . D(t) 的 均值 和 方差 


如 下 : t 
ED -| E[X(s)]ds =0, 


Var(D(t)) =E[D2(b] 
=E [由 xoay| x(Waul 


=| | tx x olavar 
=2 E[X(y)X(u)]dydu 
O<y<u<t 


t pu 
=2| | eHuvqydu 由 方程 (10.19) 
0 J0 


a (: 二 二 二 去 图 
一 个 过 程 是 平稳 过 程 的 条 件 是 相当 严格 的 , 所 以 如 果 EIX(b] = c, 上 且 Cov(X(t)， 
X(t+s)) 不 依赖 t, 我 们 定义 一 个 过 程 {X(t),t > 0} 是 二 阶 平稳 或 者 弱 平 稳 过 程 . 即 
如 果 X(t) 的 前 两 个 矩 对 于 一 切 上 都 相同 , 且 X(s) 与 X(t) 的 协 方差 只 依赖 于 |t 一 sl， 
则 一 个 过 程 是 二 阶 平稳 的 . 对 于 一 个 二 阶 平稳 过 程 , 令 
R(s) = Cov(X(t), X(t+ s)) 
因为 高 斯 过 程 的 有 限 维 分 布 (是 多 维 正 态 ) 由 它们 的 均值 和 协 方差 确定 , 由 此 推出 
一 个 二 阶 平稳 的 高 斯 过 程 是 平稳 过 程 . 
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例 10.6( 奥 恩 斯 索 因 -于 伦 贝克 过 程 ) 令 {X(t),t > 0} 是 一 个 标准 布朗 运动 , 并 且 
对 于 a >0 定 义 
V(t) = @-%t/2X (ert) 


则 过 程 {V(b,t > 0} 称 为 奥 恩 斯 泰 因 - 于 伦 贝克 过 程 . 它 描述 了 一 个 浸入 液体 或 气 
体 中 的 粒子 的 速度 模型 , 而 这 个 模型 在 统计 力学 中 是 很 有 用 的 . 让 我 们 计算 它 的 均 
值 和 协 方差 函数 
EIV(t)] =0, 
Cov(V(t), V(t + s)) =eret/2erett+a/2 


Cov(X(e®t), X(eo(t+s))) =e-ote-os/2et 由 方程 (10.17) 
一 e-as/2 


因此 , {V(t),t > 0} 是 弱 平稳 过 程 , 且 因 为 它 显然 是 高 斯 过 程 (由 于 布朗 运动 是 高 斯 
过 程 ), 所 以 我 们 可 以 得 到 它 是 平稳 过 程 的 结论 . 有 趣 的 是 , 注意 到 (以 a = 4》) 它 与 
随机 电报 信号 过 程 有 相同 的 均值 和 协 方差 函数 , 于 是 说 明 两 个 十 分 不 同 的 过 程 可 能 
具有 相同 的 二 阶 性 质 . (当然 , 如 果 两 个 高 斯 过 程 有 相同 的 均值 和 协 方差 函数 , 那么 
它们 同 分 布 .) 国 
正如 上 述 例子 所 示 , 有 很 多 类 型 的 二 阶 平稳 过 程 不 是 平稳 的 . 
例 10.7( 自 回归 过 程 ) 令 Zo, 21,22,… 是 不 相关 的 随机 变量 , 具有 E[Z,] = 0,m > 
0, 且 


ao2/(1 一 X2)，m=0 
Var(2n) = 
ar(Zn) { ee 
其 中 必 <1. 定义 
Xo=2o0， Xn=AXn-i1+Zn, n>1 (10.20) 


则 过 程 {Xn,n > 0} 称 为 一 阶 自 回归 过 程 . 它 是 说 , 在 时 刻 n 的 状态 (就 是 Xn) 是 在 
时 刻 n 一 1 的 状态 的 常数 倍加 上 一 个 随机 误差 项 Zn. 
将 方程 (10.20) 进行 迭代 得 到 
Xn 一 A(AXn 2 十 Zn 1) 十 Za 
一 X2Xn_ 2 十 MXZn_ 1 十 Za 


: n 
= Miz 
i=0 
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所 以 
n nim 
Cov(Xn, Xntm) =Cov 他 Pz, >， er 


i=0 i=0 


=》 iAntm iCov(Zi, 2i) 
i=0 


其 中 上 式 用 了 当 i 头 j 时 , Zi 与 2; 不 相关 的 事实 ， 因 为 E[Xn] = 0, 我 们 看 到 
{Xn,n > 0} 是 弱 平稳 的 (对 一 个 离散 时 间 过 程 的 定义 , 显然 与 对 一 个 连续 时 间 过 程 
的 定义 类 似 ). 图 
例 10.8 如果 对 于 随机 电报 信号 过 程 , 我 们 不 要 求 P(Xo = 1) = P(Xo = -1) = 1/2， 
而 只 要 求 E[Xo] = 0, 那么 过 程 {X(t),t > 0} 不 一 定 是 平稳 的 . ( 它 将 仍然 是 平稳 的 ， 
如 果 Xo 有 一 个 对 称 分 布 , 即 一 Xo 与 Xo 有 相同 的 分 布 .) 然而 , 这 个 过 程 将 是 弱 平 
稳 的 , 这 是 由 于 
EIX(b] =E[XoE[(-D)*®] = 0， 
Cov(X(t), X(t+ s)) =E[X(t)X(t+ s)] 
=E[X8]E[(—1)N(O+N(tts)] 
=E[X&je-”»” 由 (10.19) 图 


例 10.9 令 Wo,Wi,W2,… 是 不 相关 的 , 且 具 有 E[Wn] = 和 Var(Wn) = o2. 对 
于 某 个 正 整 数 上 定义 
a Wn + Wn-it+: + Wn-k 


Xn 
k+l 
过 程 {Xn,n > k} 每 次 都 跟踪 W 的 最 近 上 十 1 个 值 的 算术 平均 , 称 为 过 程 的 滑动 平 
均 . 利用 Wn,n > 0 都 是 不 相关 的 事实 , 我 们 看 到 
(k+1—m)o? 
Cov(Xn, Xam) = { (ET 车 0<m<k 
0, 车 m>k 
因此 , {Xn,n > 上} 是 一 个 二 阶 平稳 过 程 . [ 
令 {Xn,n > 1} 是 一 个 二 阶 平稳 过 程 且 具有 E[Xn] = k. 一 个 重要 的 问题 是 , 在 
什么 情况 下 , n = 并 半 1 Xi/n 能 收敛 到 1? 下 面 的 命题 , 我 们 只 令 述 而 不 证 明 , 说 
明 E[(Xn 一 1)3] 一 0 当 且 仅 当 ?1 R(i)/n 一 0. 即 , 乏 。 与 上 4 之 间 的 差 的 期 望 平方 
趋 于 0 当 且 仅 当 , R(i) 的 平均 值 极限 趋 于 0. 


n>k 
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命题 10.2 ” 今 {Xnm > 1} 是 一 个 二 阶 平稳 过 程 ,具有 均值 /和 协 方差 西数 R(i) = 
Cov(Xn, Xn4i), 并 且 邻 下 m 三 于 Xi/n. 那么 limn_.oo EI(X。 一 /”] =0 当 且 仅 当 
limn -2 ROi)/n =0. 


10.9 ” 弱 平 稳 过 程 的 调和 分 析  ， 


假设 随机 过 程 {X(D), -oo <t< oo} 和 {Y(), -0 < t < co] 的 联系 如 下 
YW=| xe-snods (1021) 


我 们 可 以 想象 一 个 在 时 刻 t 的 值 是 X(t) 的 信号 , 通过 一 个 物理 系统 将 它 的 值 变 形 
为 在 时 刻 t 收 到 的 由 方程 (10.21) 给 出 的 值 Y(t). 过 程 {X(t)} 和 {Y(t)} 分 别称 为 
输入 过 程 和 输出 过 程 . 函数 h 称 为 脉冲 响应 西数 . 如 果 当 s < 0, h(s) = 0, 那么 h 也 
称 为 一 个 加 权 函 数 , 由 于 方程 (10.21) 将 t 的 输出 表示 为 所 有 早 于 t 的 输入 的 加 权 
积分 , 以 h(s) 表示 给 定 s 单位 时 间 前 的 输入 权重 . 

用 方程 (10.21) 表示 的 关系 式 是 时 间 不 变 的 线性 滤波 器 的 一 个 特殊 情形 . 它 称 
为 滤波 器 , 这 是 因为 我 们 可 以 想象 输入 过 程 {X(t)} 通过 一 种 介质 , 而 后 被 滤波 以 产 
生 输 出 过 程 {Y(t)}. 它 是 线性 的 滤波 器 是 因为 如 果 输 入 过 程 {Xi(t)} (i = 1,2) 的 结 


果 是 输出 过 程 {Yi(t)}(i = 1,2)( 即 如 果 Y(t) = Xilt 一 s)h(s)ds), 那么 对 应 于 输 
入 过 程 {aXi(t) +bX2(t)} 的 输出 过 程 正好 是 {aYi(t) + bY2(t)}. 它 称 为 时 间 不 变 的 


是 由 于 输入 过 程 滞后 一 个 时 间 r( 就 是 考虑 新 的 输入 过 程 和 (t) = X(t 十 7)) 导致 输 
出 过 程 一 个 滞后 7, 这 是 由 于 


此 X(t— s)h(s)ds = 上 X(t+7T— s)h(s)ds =Y(t+7) 
0 o 


现在 假设 输入 过 程 {X(t), 一 oo < t < co} 是 弱 平 稳 过 程 , 且 具 有 E[X(t)] = 0 和 
协 方差 函数 
Rx(s) = Cov(X(t), X(t+ s)). 


我 们 要 计算 输出 过 程 {Y(t)} 的 均值 和 协 方差 函数 . 
假定 可 以 交换 期 望 与 积分 运算 的 次 序 (一 个 充分 条 件 是 | Ih(s)| < co9, 且 存在 
某 个 M < oo, 使 得 对 于 一 切 t, 有 E[X(t)] < M), 我 们 得 到 
E[Y()] = [aeee 一 sjh(s)ds=0 
类 似 地 ， 
@ 在 本 节 中 , 所 有 积分 的 范围 是 从 一 oo 到 十 co- 
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Covy te), Yt) = cor ( [x(a = slsyass, |xe-sneoam) 
= [core -sxe-sa)neoneadsds 


= J Rx(t2 — s2 —t1+ si)h(si)h(s2)dsids2 (10.22) 


因此 , Cov(Y(t1),Y(t2)) 只 通过 to 一 ti 依赖 于 t,to, 于 是 证 明了 {Y(t)} 也 是 弱 平稳 
的 . 

然而 , 上 面 关于 Ry(t2 一 妇 ) = Cov(Y(t1),Y(t2)) 的 表达 式 用 Rx 和 Ry 的 傅 里 
叶 变换 表达 更 紧凑 且 更 有 用 . 对 于 i = V-1, 以 

hx(w) = Jax()as 和 Ky(w) = [eay (s)ds 
分 别 记 Rx 和 Ry 的 傅 里 叶 变换 . 函数 Rx 也 称 为 过 程 {X(t)} 的 功率 谱 密 度 . 同 
样 ,以 
h(w) = ”was 
记 函 数 h 的 传 里 叶 变 换 . 那么 , 由 方程 (10.22)， 
hy(w) = [ae — s2 + s1)h(s1)h(s2)ds1ds2ds 


= ee axc 一 82 十 Si)dse™ivs2h(s2)ds2eu™h(si)ds1 


= Rx (w)h(w)h(—w) (10.23) 
现在 , 利用 表示 
eiz = cosz 十 isinz， ei =cos(-7z)+isin(-z)= cosz 一 isinz 
我 们 得 到 
h(w)h(—w) = [je cos(ws)ds 一 让 sin(wa)as| 


x [je cos(ts)ds 十 :| h(s) sntoad 


1 = | h(s) costusjas| : + | h(s) soadi 


2 


| | h(s)e-iwsds| = |F(w)l? 


因此 , 由 方程 (10.23) 我 们 得 到 

Ry(w) = Rx (wR) 
简 言 之 , 输出 过 程 的 协 方差 函数 的 傅 里 叶 变换 , 等 于 脉冲 响应 函数 的 傅 里 叶 变 换 绝 
对 值 的 平方 乘 以 输入 过 程 的 协 方差 函数 的 傅 里 叶 变换 . 
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1. 


习 题 


在 下 面 的 习题 中 , {B(t),t > 0} 是 一 个 标准 布朗 运动 , 而 以 T。 记过 程 击 中 a 所 用 的 时 间 . 
B(s) 二 B(t) (s < t) 的 分 布 是 什么 ? 


,计算 在 给 定 B(t1) = 4 且 B(t2) = B 时 , B(s) 的 条 件 分 布 , 其 中 0 可 ti<s<t. 


“3. 对 于 妇 <t2 < ts 计算 E[B(t1)B(t2)B(ta)]. 


“10. 


11. 


12. 


13. 
14. 


,证 明 


P{Ta<o0}=1, ElTs]=%, a#0 


.P{T1 < TL1 < T2} 是 多 少 ? 
.假设 你 拥有 一 股价 格 按 标准 布朗 运动 过 程 变化 的 股票 ， 假 设 你 是 以 价格 5 十 c 购买 这 支 股 


票 的 , c > 0, 且 现 值 是 b. 你 决定 , 或 者 当 价格 到 达 5 十 c 时 , 或 者 过 了 一 个 附加 的 时 间 上 后 
(要 看 那 一 个 首先 发 生 ) 卖 出 这 股 股票 . 问 你 不 能 复原 你 购 进 的 价格 的 概率 是 多 少 ? 


. 计算 ?{ .A z} 的 表达 式 . 


tgsgta 


考虑 随机 游 动 , 它 在 每 个 At 时 间 单位 分 别 以 概率 p 和 1 一 p, 或 者 增加 或 者 减少 一 个 数量 


VE, 其 中 p= 了 (1+ VAD). 


(a) 论证 当 At 一 0 时 , 最 终 的 极限 过 程 是 一 个 具有 漂移 速率 / 的 布朗 运动 . 
(b) 用 (a) 以 及 赌 徒 破产 问题 的 结果 ( 见 4.5.1 节 ), 计算 一 个 具有 漂移 速率 / 的 布朗 运动 
在 减少 到 B 之 前 先 增加 到 4 的 概率 , 4 > 0, B > 0. 


. 令 {X(t),t > 0} 是 一 个 具有 漂移 系数 / 和 方差 参数 o? 的 布朗 运动 . 对 于 s < 由 X(s) 和 


XXX(b) 的 联合 密度 函数 是 什么 ? 

令 {X(t),t > 0} 是 一 个 具有 漂移 系数 上 和 方差 参数 o? 的 布朗 运动 . 给 定 X(s) = c 时 ， 
X(b) 的 条 件 分 布 是 什么 , 假如 

(a)s<t? 

(b)t<s? 

考虑 一 个 过 程 ,其 取 值 在 每 h 个 时 间 单 位 变化 , 其 新 值 等 于 旧 值 或 者 以 概率 p = B+ 


Eva) 乘 以 因子 e YA, 或 者 以 概率 1 一 p 乘 以 因子 eV*. 当 疡 趋 于 0 时 , 证 明 这 个 过 程 
收敛 到 一 个 具有 漂移 系数 J 和 方差 参数 o? 的 几何 布朗 运动 . 

一 支 股票 现在 以 50 美元 一 股 的 价格 卖 出 . 在 一 个 时 间 单 位 以 后 , 它 的 价格 (以 现 值 美元 计 ) 
或 者 是 150 美元 , 或 者 是 25 美元 . 在 时 刻 1 购买 y 单位 股票 的 期 权 以 价格 cy 购 得 . 

(a) 为 了 不 是 一 定 赢利 , c 应 该 是 多 少 ? 

(b) 如 果 c = 4, 解释 你 怎样 可 以 保证 一 定 赢利 . 

(©) 如 果 c= 10, 解释 你 怎样 可 以 保证 一 定 赢利 . 

(d) 用 套利 定理 验证 你 对 于 (a) 的 回答 . 

验证 在 例 10.2 后 面 注 中 令 述 的 命题. 

一 支 股票 的 现 值 是 100. 在 时 刻 1 的 结果 是 , 或 者 是 50, 或 者 是 100, 又 或 者 是 200. 在 时 
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15. 


16. 
17. 
18. 


"19. 


*20. 


21. 


22. 


刻 1 购买 y 股 股票 的 ( 现 值 ) 价值 为 ky 的 期 权 的 价格 是 cy. 
(a) 如 果 大 = 120, 证 明 套利 发 生 当 且 仅 当 c > 80/3. 
(b) 如 果 上 大 = 80, 证 明 没 有 套利 机 会 当 且 仅 当 20 < c < 40. 
一 支 股票 的 现 值 是 100. 假设 这 支 股票 价格 的 对 数 按 漂移 系数 / = 2 和 方差 参数 o? = 1 
的 布朗 运动 变化 . 给 出 在 时 刻 10 以 
(a) 每 单位 100;  (b) 每 单位 120; (c) 每 单位 80. 
用 购买 这 个 股票 的 期 权 的 布莱克 -斯 科 尔 斯 价格 定价 . 假定 连续 复 利率 是 5%. 
随机 过 程 {Y(t),t > 0} 称 为 是 装 过 程 , 如 果 对 于 s < t， 
ElY (IY (uw),0 < u < s]=Y(s) 
如 果 {Y(t),t > 0} 是 装 , 证 明 E[Y (t)] = E[Y(0)]. 
证 明 标 准 布朗 运动 是 鞭 . 
证 明 当 Y(t) = B?(t) 一 t 时 , {Y(t),t > 0} 是 黄 . E[Y(tb)] 是 多 少 ? 
提示 , 先 计 算 E[Y (t)|B(w),0 < u< s] 
证 明 当 Y(t) = exp{cB(t) 一 ct/2} 时 , {Y(t),t > 0} 是 黄 , 其 中 c 是 任意 常数 .E[Y(t)] 
是 多 少 ? 
坝 的 一 个 重要 的 性 质 是 , 如 果 你 连续 地 观察 这 个 过 程 , 且 停 止 在 某 个 时 刻 T, 那么 在 遵从 某 
些 技术 性 条 件 时 (在 考虑 的 问题 中 是 成 立 的 ) 有 
E[Y(7)] = EIY(o) 
时 刻 T 通常 依赖 于 过 程 的 值 , 并 且 称 为 这 个 革 的 停 时 ， 这 就 导致 , 被 停止 的 扫 的 期 望 值 等 
于 固定 时 间 的 期 望 , 称 为 凌 停 止 定理 . 
令 
T= Min{t: B(t) =2— 4t} 
即 了 是 标准 布朗 运动 首次 击 中 直线 2 一 4 的 时 间 . 用 默 停止 定理 求 E[T]. 
令 {X(t),t > 0} 是 一 个 具有 漂移 系数 上 和 方差 参数 o? 的 布朗 运动 即 ， 
X(t) =0B(t) + nt 
令 人 > 0, 且 对 于 正常 数 = 令 
T=Min{t: X(t) = z} 
=Min{t: B(t) = 2} 
即 , 了 是 过 程 {X(t),t > 0} 首次 击 中 z 的 时 间 . 用 持 停 止 定理 证 明 
ElT]=z/p 
令 X( = oB(t) 十 jt, 对 于 给 定 的 正常 数 4 和 B, 以 p 记 {X(t),t>0} 在 击 中 -已 之 
前 先 击 中 4 的 概率 . 
(a) 定义 停 时 了 为 过 程 首次 击 中 4 或 -B 的 时 间 . 用 这 个 停 时 和 在 习题 19 中 定义 的 黄 证 
明 
Elexp{c(X(T) — pT)/o — eT7/2}] =1 
(b) 令 c= 一 2p/o, 证明 
Elexp{—24X(T)/o}] = 1 
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23. 


“25. 


“26. 


“27. 
28. 


29. 


“30. 
31. 
32. 


“33. 


34. 


(c) 利用 (b) 和 了 的 定义 求 p. 

提示 exp{ 一 2pX(T)/o?} 的 可 能 值 是 什么 ? 

令 X(D =oB(t)+jpt, 并 且 定 义 停 时 了 为 过 程 {X(b,t > 0} 首次 击 中 A 或 一 B 的 时 间 ， 
其 中 4 和 B 是 给 定 的 正常 数 . 用 黄 停 止 定理 和 习题 22 的 (c) 求 E[T]. 


, 令 {X(t),t > 0} 是 一 个 具有 漂移 系数 上 和 方差 参数 0? 的 布衣 运动: 假设 人 > 0. 令 


z > 0, 并 且 (如 在 习题 21 中 那样 ) 定义 停 时 了 为 
T= Min{t:X 人 =z} 

利用 在 习题 18 中 定义 的 黄 , 结合 习题 21 的 结果 , 证 明 

Var(T) = zo2/122 
在 习题 25~27 中 , {X(t),t > 0} 是 一 个 具有 漂移 系数 /上 和 方差 参数 o? 的 布朗 运动 过 程 . 
假设 过 程 在 每 个 A 时 间 单位 , 或 以 概率 p 增加 一 个 量 oVA, 或 以 概率 1 一 p 减少 一 个 量 
oVA, 其 中 

p=3(1+ EVA) 
证 明 当 A 趋 于 0 时 , 此 过 程 收敛 到 具有 漂移 系数 / 和 方差 参数 o? 的 布朗 运动 
将 过 程 首 次 等 于 y 的 时 刻 记 为 Ty. 对 y > 0, 证 明 


1， 若 4>0 
e2yn/o”， 若 人 <0 


令 M = maxost<ceX(t) 表示 曾经 到 达 的 最 大 值 . 解释 为 何 上 面 的 习题 蕴涵 了 : 当 儿 < 0 
时 M 是 速率 为 -2p/o? 的 指数 随机 变量 . 
确定 minogv<t(y) 的 分 布 函数 


计算 (a) 下 tdB(t) 和 (b) 上 ?dB(t) 的 均值 和 方差 


令 Y(t)=tB(1/t),t >0 和 Y(0)=0. 

(a) Y(t) 的 分 布 是 什么 ? 

(b) 计算 Cov(Y(s), Y(t)). 

(e) 论证 {Y(t),t > 0} 是 一 个 标准 布朗 运动 . 

对 于 a>0, 令 Y(t) = B(a?t)/a. 论证 {Y(t),t > 0} 是 一 个 标准 布朗 运动 . 


对 于 s < 二 论证 B(s) -了 B(t) 和 B(t) 是 独立 的 . 


以 {2(t),t > 0} 记 一 个 布朗 桥 过 程 . 证 明 如 果 
Y(t)= (t+1)2(t/(t+ 1)) 
那么 {Y(t),t > 0} 是 一 个 标准 布朗 运动 . 
令 X(t) = N(t 十 1) 一 NN(t), 其 中 {N(t),t > 0} 是 速率 为 A 的 泊 松 过 程 . 计算 
Cov(X(t), X(t+ s)) 
令 {N(t),t > 0} 是 速率 为 和 的 泊 松 过 程 , 并 且 定 义 Y(t) 为 从 t 开始 到 下 一 次 泊 松 事件 的 
时 间 . 
(a) 论证 {Y(t),t > 0} 是 一 个 弱 平稳 过 程 . 
(b) 计算 Cov(Y(t),Y (t+ s)). 


P{Ty < 
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35. 令 {X(t), 一 00 < t < co} 是 一 个 具有 协 方差 函数 Rx(s) = Cov(X(t), X(t 十 s)) 的 弱 平 
稳 过 程 
(a) 证 明 
Var(X(t+ s) — X(t)) =2Rx(0) —2Rx(t) 
(b) 如 果 Y(t) = X(t 十 1) 一 Xb, 证 明 {Y(), 一 00 < t < co} 也 是 弱 平 稳 过 程 , 具有 协 方 
差 函 数 Ry(s) = Cov(Y(t),Y(t 十 s)) 满足 
Ry(s) =2Rx(s) — Rx(s—1)— Rx(s+1) 
36. 令 页 和 Y 是 独立 的 单位 正 态 随机 变量 , 并 且 对 于 某 个 常数 w 令 
X(t)=Yicoswt+Y2sinwt, 一 co <t<oo 
(a) 证 明 {X(t)} 是 一 个 弱 平稳 过 程 . 
(b) 论证 {X(t)} 是 一 个 平稳 过 程 
37. 令 {X(b,-co<t<oo} 是 一 个 弱 平稳 过 程 , 具有 协 方差 函数 R(s)=Cov(X(t), XX(t+s))， 
而 以 存 (w) 记 这 个 过 程 的 功率 谱 密度 
的) 证明 到 (w) = 一 w). 并 证 明 


R(s) = 去 | Rlw)eqw 


(ii) 用 上 面 证 明 . 
| Flw)dw = 2xE[X2(b] 
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11.1 引 言 


以 闫 = (X1,…,Xn) 记 一 个 具有 密度 函数 f(z1,… ,zn) 的 随机 向 量 , 并 且 假 
设 对 于 某 个 n 维 函 数 9, 我 们 想 计算 


Blo00) = [ge sn) Ce marr drs am 


例如 , 当 X 的 值 代表 前 In/2] 个 到 达 间隔 和 服务 时 间 @ 时 , g 可 能 代表 在 队列 中 前 
[n/3] 个 顾客 的 总 延迟 时 间 . 在 许多 情况 下 , 我 们 不 可 能 解析 地 准确 计算 上 述 的 多 重 
积分 , 甚至 不 可 能 在 给 定 的 精度 之 内 用 数值 带 近 . 剩 下 的 一 种 可 能 就 是 用 模拟 的 手 
段 逼近 Elg(X)]. 

为 了 带 近 Elg(X)], 首先 生成 一 个 具有 联合 密度 函数 f(z1,… ,zs) 的 随机 向 时 
关中 = (X19,…,X 如 ), 然后 计算 YW = g(X 趾 ). 再 生成 第 二 个 随机 向 量 (与 第 一 
个 独立 ) 多 中 ,并 计算 Y(2 = 9g(X())， 继续 这 样 做 , 直至 已 经 生成 > (一 个 固定 的 
数 ) 个 独立 同 分 布 的 随机 变量 了 中 = 9(XG)(Gi = 1,…,7) 为 止 . 由 强大 数 定律 我 们 
知道 


YG 十 .十 YO 
六 


=ElY®= 
mn = E[lY™™] = Els(X)] 


从 而 我 们 可 以 用 生成 的 Y 的 平均 作为 Elo(X)] 的 一 个 估计 . 这 种 估计 Elg(X)] 方 
法 称 为 从 特 卡 罗 模拟 方法 - 

显然 余下 的 问题 是 如 何 生成 ( 即 模拟 ) 具有 竺 定 联合 密度 的 随机 向 量 . 这 样 做 
的 第 一 步 是 能 从 (0,1) 上 的 均匀 分 布 生成 随机 变 基 ， 一 各 方法 是 , 取 10 个 标号 为 
0,1,…,9 的 相同 纸 片 , 将 它们 放 在 一 个 由 于 中 , 然后 从 这 个 帽子 中 有 放 回 地 连续 抽 
取 个 纸 片 得 到 的 数字 序列 (在 前 面 置 一 个 十 进 制 小 数 点 ) 可 以 看 成 (0,1) 均匀 
随机 变 其 全 入 到 最 近 的 (而 】 的 值 .例如 ,如果 抽取 到 的 数字 序列 是 3 8 7, 2, 1 
那么, (0,1) 均 久 随 机 变革 的 信 是 0.387 21 (在 最 近 的 0.000 01 范围 内 ). (0,1) 均匀 随 
机 变量 值 的 表 , 称 为 随机 数 表 , 它 已 经 被 大 量 出 版 (例如, 见 RAND 公司 的 4 Million 


Random Digits with 100 000 Normal Deviates(New York, The Free Press, 1955)). 表 
11.1 就 是 这 样 的 表 . 


@ 我 们 用 记号 [a] 表示 小 于 或 等 于 a 的 最 大 整数 . 
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表 11.1 随机 数 表 


04839 96423 24878 82651 66566 14778 76797 14780 13300 87074 
68086 26432 46901 20848 89768 81536 86645 12659 92259 57102 
39064 66432 84673 40027 32832 61362 98947 96067 64760 64584 
25669 26422 44407 44048 37937 63904 45766 66134 75470 66520 
64117 94305 26766 25940 39972 22209 71500 64568 91402 42416 
87917 77341 42206 35126 74087 99547 81817 42607 43808 76655 
62797 56170 86324 88072 76222 36086 84637 93161 76038 65855 
95876 55293 18988 27354 26575 08625 40801 59920 29841 80150 
29888 88604 67917 48708 18912 82271 65424 69774 33611 54262 
73577 12908 30883 18317 28290 35797 05998 41688 34952 37888 
27958 30134 04024 86385 29880 99730 55536 84855 29080 09250 
90999 49127 20044 59931 06115 20542 18059 02008 73708 83517 
18845 49618 02304 51038 20655 58727 28168 15475 56942 53389 
94824 78171 84610 82834 09922 25417 44137 48413 25555 21246 
35605 81263 39667 47358 56873 56307 61607 49518 89356 20103 
33362 ”64270 01638 92477 66969 98420 04880 ”45585 46565 04102 
88720 82765 34476 17032 87589 40836 32427 70002 70663 88863 
39475 46473 23219 53416 94970 25832 69975 94884 19661 72828 
06990 67245 68350 82948 11398 42878 80287” 88267 47363 46634 
40980 07391 58745 25774 22987 80059 39911 96189 41151 14222 
83974 29992 65381 38857 50490 83765 55657 14361 31720 57375 
33339 31926 14883 -24413 59744 92351 97473 89286 35931 04110 
31662 25388 61642 34072 81249 35648 56891 69352 48373 45578 
93526 70765 10592 04542 76463 54328 02349 17247 28865 14777 
20492 38391 91132 21999 59516 81652 27195 48223 46751 22923 
04153 53381 79401 21438 83035 92350 36693 31238 59649 91754 
05520 91962 04739 13092 97662 24822 94730 06496 35090 04822 
47498 87637 99016 71060 88824 71013 18735 20286 23153 72924 
23167 49323 45021 33132 12544 41035 80780 45393 44812 12515 
23792 14422 15059 45799 22716 19792 09983 74353 68668 30429 
85900 98275 32388 52390 16815 69298 82732 38480 73817 32523 
42559 78985 05300 22164 24369 54224 35083 19687 11062 91491 
14349 82674 66523 44133 00697 35552 35970 19124 63318 29686 
17403 53363 M167 64486 64758 75366 76554 31601 12614 33072 
23632 27889 47914 02584 37680 20801 72152 39339 34806 08930 


然而 , 这 并 不 是 在 数字 计算 机 上 模拟 (0, 1) 均匀 随机 变量 的 方法 . 在 实践 中 , 人 
们 用 擅 随 机 数 来 代替 真正 的 随机 数 ， 大 多 数 随机 数 生 成 器 由 一 个 初 值 Xo( 称 为 种 
子 ) 开始 , 然后 用 给 定 的 正 整数 a、c 和 m, 再 令 


Xn+1l 一 (aXn 十 cl) modm, n>0 


递 推 地 计算 值 , 其 中 上 式 的 含义 是 , 把 oXn +c 被 m 除 的 余数 取 为 Xn+1. 于 是 , 每 
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个 Xn 是 0,1,…,m 一 1 中 的 一 个 数 , 而 基 Xa/m 就 取 为 (0,1) 均匀 随机 变量 的 近 
似 值 . 可 以 证 明 , 只 要 适当 地 选取 a、c、m, 上 面 给 出 的 一 个 数列 看 起 来 好 像 就 是 从 
独立 的 (0, 1) 均匀 随机 变量 生成 的 . 

在 模拟 一 个 任意 分 布 的 随机 变 基 时 , 我 们 以 假设 能 够 模拟 (0, 1) 均匀 分 布 随机 

变量 的 值 作为 出 发 点 , 术语 “随机 数 ” 表示 由 这 个 分 布 模拟 的 独立 随机 变量 . 在 11.2 
节 和 11.3 节 中 , 我 们 将 介绍 模拟 连续 随机 变量 的 一 般 技术 和 特殊 技术 ; 在 11.4 节 
中 , 我 们 对 离散 随机 变量 作 相 同 的 讨论 . 在 11.5 节 中 , 我 们 讨论 模拟 给 定 联合 分 布 
的 随机 变量 和 随机 过 程 . 对 于 非 时 齐 的 泊 松 过 程 的 模拟 我 们 给 予 特别 的 重视 , 事实 
上 , 对 此 讨论 了 3 种 不 同 的 方法 . 二 维 泊 松 过 程 的 模拟 在 11.5.2 节 中 讨论 . 在 11.6 
节 中 , 我 们 讨论 通过 降低 它们 的 方差 , 以 增加 模拟 估计 准确 性 的 各 种 方法 ; 在 11.7 
节 中 , 我 们 考虑 为 了 达到 要 求 水 平 的 准确 性 所 需要 模拟 运行 次 数 的 选取 问题 . 但 在 
开始 讲述 之 前 , 我 们 先 考虑 两 个 在 组 合 问题 中 模拟 的 应 用 . 
例 11.1( 生 成 随机 排列 ) ”假设 我 们 生成 数 1,2,…,n 的 一 个 排列 , 就 是 使 得 所 有 的 
nl 个 可 能 次 序 都 是 等 可 能 的 . 其 算法 如 下 , 首先 通过 在 1,…,n 中 随机 地 选取 一 个 
数 , 将 这 个 数 放 在 位 置 n; 然后 在 余下 的 n 一 1 个 数 中 随机 地 选取 一 个 , 将 这 个 数 
放 在 位 置 n 一 1; 然后 在 余下 的 n 一 2 个 数 中 随机 地 选取 一 个 , 将 这 个 数 放 在 位 置 
n. 一 2; 如 此 等 等 (其 中 随机 地 选取 一 个 数 , 是 指 每 一 个 余下 的 数 都 等 可 能 地 被 选取 ). 
然而 , 我 们 无 需 精 确 地 考虑 哪 一 个 数 尚 待 安 置 , 方便 而 有 效 的 方法 是 将 这 些 数 保持 
成 有 序 的 列表 , 然后 随机 地 选取 数 的 位 置 , 而 不 是 这 个 数 本 身 . 就 是 说 , 从 任意 的 次 
序 pi,pz,… ,pn 开始 , 我 们 随机 地 选取 位 置 1,…,n 中 的 一 个 , 而 后 将 这 个 位 置 中 
的 数 与 在 位 置 n 中 的 数 对 换 . 现在 我 们 随机 地 选取 位 置 1,…,n 一 1 中 的 一 个 , 而 后 
将 这 个 位 置 中 的 数 与 在 位 置 n 一 1 中 的 数 对 换 , 如 此 等 等 . 

为 了 执行 上 面 的 程序 , 我 们 必须 能 够 生成 一 个 等 可 能 地 从 1,2,…,k 中 的 取 任 
意 值 的 一 个 随机 变 基 . 为 此 , 以 UV 记 一 个 随机 数 ( 即 UV 是 在 (0,1) 上 均匀 分 布 的 ) 且 
注意 kU 在 (0,k) 上 是 均匀 的 , 所 以 


Pli-1<kU < 让 = 廊 i=l sk 
因此 , 如 果 随 机 变量 了 = [kU] 十 1 将 使 
P{I=j=P{k0]=i- 直 =Pli-1<U < 二天 

现在 可 以 将 前 面 生成 随机 变量 的 算法 写 出 如 下 : 

步骤 1: 令 pi1,p2,…,pn 是 1,2,…,n 的 一 个 排列 (例如 , 我 们 可 以 选取 p; = 小 
j= 1,.…,n). 

步骤 2: 置 上 = m- 

步骤 3: 生成 一 个 随机 数 U, 且 令 了 = [KU] 十 1. 
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步骤 4: 交换 pr 与 pk 的 值 . 

步骤 5: 令 上 = 大 一 1 并 且 如 果 大 > 1, 则 返回 步骤 3. 

步骤 6: p1,p2,…,pn 就 是 所 要 求 的 随机 排列 . 

例如 , 假设 n = 4, 且 初始 排列 是 1,2, 3,4. 如 果 了 的 第 一 个 值 ( 它 等 可 能 地 是 
1,2,3,4) 是 了 = 3, 那么 新 的 排列 是 1,2,4,3. 如 果 工 的 下 一 个 值 是 工 = 2, 那么 新 的 
排列 是 1,4, 2, 3. 如 果 工 的 最 后 一 个 值 是 工 = 2, 那么 最 后 的 排列 是 1,4, 2, 3, 这 就 是 
随机 排列 的 值 . 

上 述 算法 的 一 个 重要 性 质 是 , 它 也 可 以 用 来 生成 整数 1,2,…,n 的 一 个 大 小 为 
7 的 随机 子 集 . 即 只 要 遵循 算法 直到 位 置 n,n 一 1,n 一 7 十 1 都 完成 了 更 换 , 在 这 些 
位 置 的 元 素 就 构成 随机 子 集 . 国 
例 11.2( 在 很 大 的 列表 中 不 同 条 目 个 数 的 估计 ) ”考虑 有 n 个 条 目的 一 个 列表 , 其 
中 非常 大 , 假设 我 们 有 兴趣 估计 这 个 表 中 不 同 元 素 的 个 数 d. 如 果 将 在 位 置 i 的 
元 素 在 此 列表 中 出 现 的 次 数 记 为 mi, 那么 我 们 可 以 将 d 表示 为 

d= Ey 


i=1 wy 


为 了 估计 d 假设 我 们 生成 了 等 可 能 地 是 1,2,.…,n 之 一 的 一 个 随机 值 X( 即 我 们 取 
X = ao] + 1)， 而 后 以 m(X) 记 在 位 置 X 的 元 素 在 列表 中 出 现 的 次 数 . 那么 
1 车 县 d 
sz] - i 
因此 , 如 果 生成 了 上 个 这 样 的 随机 变量 X1,…，X, 那么 可 以 用 
n/m(Xi) 
py 
估计 
假设 现在 对 于 列表 中 的 每 个 条 目 都 有 一 个 从 属于 它 的 值 (第 i 个 元 素 的 值 是 
vi)). 不 同 条 目的 值 的 和 ( 记 为 可 以 表示 为 
a vy(i) 
' We 


现在 , 如 果 X = [InU] 二 1, 其 中 UU 是 一 个 随机 数 , 那么 
oa00] 只 a01_ 
三 el Dm Jn 


i=1 


因此 , 我 们 可 以 通过 生成 XI,…, Xx 而 后 用 


ne v(Xi) 
< 学 m(X:) 


11.2 ”模拟 连续 随机 变量 的 一 般 方法 543 


估计 vw. 
作为 上 面 的 一 个 重要 的 应 用 , 以 Ai = {ai,… aime},i 二 1，…,s 记事 件 , 且 候 
设 我 们 有 兴趣 估计 P 人 4 由 于 


5 Pl(ai;) 
? (U4) = 2 P= 2 
其 中 ma) 是 点 wy 所 属 的 事件 的 个 数 , 上 面 的 方法 可 以 用 来 估计 P(U;_; 41). 
注意 上 面 估计 v 的 程序 , 在 没有 值 集合 {v1,…,vn} 的 先 验 知识 时 也 可 以 是 有 
效 的 , 就 是 说 , 我 们 能 够 确定 在 一 个 特定 位 置 的 元 素 的 值 和 这 个 元 素 在 列表 中 出 现 
的 次 类 必 名 了 当 信 的 全 是 已 和 时 我们 有 一 个 更 为 有 站 的 方法 将 在 全 
11.11 中 说 明 . 
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在 本 节 中 , 我 们 介绍 模拟 连续 随机 变量 的 3 种 方法 . 
11.2.1 逆 变 换 方法 

模拟 一 个 具有 连续 分 布 的 随机 变量 的 一 般 方法 ( 称 为 逆 变 换 方法 ) 基于 下 述 命 
题 . 
命题 11.1 邻 U 是 一 个 (0,1) 上 的 均匀 随机 变量 ， 对 于 任意 连续 分 布 函 数 下 如 


果 我 们 定义 随机 变量 奈 为 
X=F-1(UV) 


那么 随机 变量 X 有 分 布 函数 FF. (1(w) 定义 为 使 下 (ZT) = 4u 的 值 z.) 


证 明 
Fx(a) =P{X <a}=P{F- (UV) < a} (11.1) 
现在 , 由 于 F(z) 是 单调 函数 , 由 此 推出 F-:(Z) < a 当 上 且 仅 当 U < F(a). 因此 , 由 
方程 (11.1) 我 们 看 到 
Fx(a)=P{V < F(a)} = F(a) 


因此 , 当 天 ~: 可 计算 时 , 我 们 可 以 通过 模拟 一 个 随机 数 U, 然后 置 X = 一 i 
由 一 个 连续 分 布 已 来 模拟 随机 变量 X. 
例 11.3( 模 拟 指数 随机 变量 ) ”如 果 F(z) = 1 一 e ,那么 F-:(u) 是 满足 

1-e ”=wu 或 z=-In(1l-z) 
的 值 z, 因此 , 如 果 U 是 一 个 (0,1) 均匀 随机 变量 , 那么 
F-1(U)=—In(1—U) 

是 指数 分 布 , 具有 均值 1. 因为 1 一 U 也 在 (0,1) 上 均匀 分 布 , 由 此 推出 -lnU 是 均 
值 为 1 的 指数 随机 变量 , 由 此 推出 -clnU 是 均值 为 c 的 指数 随机 变量 . 国 
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11.2.2 ”拒绝 法 

假设 我 们 有 办 法 模拟 一 个 具有 密度 函数 g(z) 的 随机 变量 . 对 模拟 出 具有 密度 
f(z) 的 连续 分 布 函数 的 随机 变量 , 我 们 可 以 以 此 为 基础 , 通过 模拟 出 自 9 的 随机 变 
基 Y, 然后 以 比例 f(Y)/g(Y) 的 概率 接受 这 个 模拟 值 . 

特别 地 , 令 c 是 一 个 常数 , 使 得 


一 和 cc 对 于 一 切 y 
9 


那么 , 我 们 用 下 述 技术 模拟 出 具有 密度 f 的 连续 分 布 函 数 的 随机 变 基 . 
拒绝 法 
步骤 1: 模拟 具有 密度 9 的 随机 变量 Y, 并 且 模 拟 一 个 随机 数 U. 


步 又 2, 如 果 U < 了 了 0) ,那么 置 X = 了. 否则 返回 步骤 1. 
cg(Y) 


命题 11.2 ”由 拒绝 法 生成 的 随机 变量 X 具有 密度 f. 
证 明令 X 是 得 到 的 值 , 而 以 N 记 必需 重复 的 次 数 . 那么 
P{X<zlj=Pfyvw < zx} 
=P{Y < zlU < f(Y)/cg(Y)} 
_P{Y < wv < 0)/cg0)} 
-PY < a0 10)/es0)} 
[PY < #0 < 10)/g0)Y = voley 
K 


[wetter 


其 中 天 =P{U < f(Y)/cg(Y)}. 令 z 一 oo, 表明 天 = 1/c 故而 完成 了 证 明 . mn 
注 (i) 上 面 的 方法 原先 是 由 冯 “' 诺 伊 曼 在 特殊 情形 下 引入 的 , 其 中 g 只 在 某 个 有 
限 区 间 (a,b) 上 为 正 , 而 Y 则 选取 为 在 (a,b) 上 均匀 的 分 布 ( 即 Y 十 a+ (b 一 a)0). 

(ii) 注意 我 们 “以 概率 f(Y)/cg(Y) 接受 值 Y” 的 方式 是 : 通过 生成 一 个 (0,1) 
上 的 均匀 随机 变量 U, 然后 , 如 果 有 U < f(Y)/cg(Y), 就 接受 工 . 

( 道 ) 因为 这 个 方法 的 每 一 次 重复 将 独立 地 以 概率 P{U < f(Y)/cg(Y)} = le 
接受 一 个 值 , 由 此 推出 重复 的 次 数 是 均值 为 c 的 几何 随机 变量 . 

(iv) 实际 上 , 当 决定 是 否 接受 时 , 并 没 必要 生成 一 个 新 的 均匀 随机 变量 , 因为 只 
要 以 某 些 附加 计算 的 代价 , 在 每 一 次 重复 时 都 对 单个 随机 数 作 适 当 的 修正 ， 就 可 以 
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应 用 始终 . 为 了 看 到 这 是 怎样 进行 的 , 注意 U 的 实际 值 并 没有 用 到 (只 用 到 是 否 有 
U < f(Y)/cg(Y)). 因此 , 如 果 工 被 拒绝 , 也 就 是 U > f(Y)/cg(Y), 我 们 可 以 利用 对 
于 给 定 的 Y, 随机 变量 

U—f(Y)/cg(Y) _ cUg(Y)— f(Y) 

1—f(Y)/cg(Y) cg(Y)—f(Y) 
在 (0,1) 上 是 均匀 的 这 个 事实 . 因此 , 它 可 以 在 下 一 次 重复 中 用 作 均 匀 随 机 数 . 以 上 
面 的 计算 为 代价 节省 生成 一 个 随机 数 , 是 否 是 净 节 省 , 很 大 程度 地 依赖 于 用 来 生成 
随机 数 的 方法 . 国 
例 11.4 我们 利用 拒绝 法 生成 具有 密度 函数 

f(z)=20z(1—2z)3, 0<z<l1 


的 随机 变 基 . 因为 这 个 随机 变量 ( 它 是 参数 2,4 的 贝塔 分 布 ) 集中 在 区 间 (0,1) 中 ， 
让 我 们 考虑 对 


g(z)=1，0<z<1 
作 拒 绝 法 . 为 了 确定 “ 使 f(z)/g(z) < “, 我 们 用 微 积分 确定 


f(z) _ 
9 20z(1 一 z)3 


的 最 大 值 . 对 此 其 求 导 得 到 


于 纺 | = 20[(1 — z)3 — 3z(1 — x)2] 


令 它 等 于 0, 表明 最 大 值 在 z = 1/4 处 达到 , 于 是 
f(z) IN AN 5 
旭 s 人 二 二 -加 = 


f(z) _ 256 


cg(z) 27 


因此 


zZ(1 一 zZ)3 
这 样 拒绝 程序 的 步 又 如 下 ， 

步 又 1: 生成 随机 数 和 芭 . 

步骤 2: 如 果 U2 < EA 一 避 )3, 则 停止 , 并 且 置 X = 万 . 否则 返回 第 一 步 . 
执行 步 对 1 的 平均 次 数 是 c= 2 四 


例 11.5( 模 拟 正 态 随机 变量 ) ”为 了 模拟 一 个 标准 正 态 随机 变量 Z( 即 均值 为 0 和 
方差 为 1 的 正 态 随 机 变量 ), 首先 注意 2 的 绝对 值 具 有 分 布 密度 


f(z) = 六 0<z< oo (11.2) 
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我 们 将 通过 拒绝 法 用 


yg(z)=6*, 0<zs<o0 
从 模拟 上 述 密度 开始 . 现在 注意 
但 = V2e/xexp{—(z —1)*/2} < V2e/r 

因此 , 用 拒绝 法 我 们 可 以 由 方程 (11.2) 模拟 如 下 : 

(a) 生成 随机 数 Y 和 U,Y 是 速率 为 1 的 指数 随机 变量 , 且 U 在 (0,1) 上 均匀 
分 布 . 

(b) 如 果 U < exp{ 一 (Y 一 1)?/2}, 或 者 等 价 地 , 如 果 

—InU >(Y—1)/2 


则 取 X =Y. 否则 返回 步骤 (a). 

一 旦 模拟 了 具有 密度 函数 (11.2) 的 随机 变量 X, 我 们 就 可 以 通过 令 2 等 可 能 
地 是 X, 或 者 -X, 以 生成 一 个 标准 正 态 随机 变量 . 

为 了 改进 上 述 方法 , 首先 注意 , 从 例 11.3 推出 一 lnU 也 是 速率 为 1 的 指数 随机 
变 其 . 因此 , 步骤 (a) 和 步骤 (b) 等 价 于 下 面 的 : 

(a') 生成 独立 的 速率 为 1 的 指数 随机 变 荆 半 和 Y. 

(b') 如 果 歼 > (Yi 一 1)2/2, 则 取 X = 疙 .否则 返回 步骤 (a'). 
现在 假设 我 们 接受 步骤 (b')， 那 么 , 由 指数 随机 变量 缺乏 记忆 性 质 推出 Y 超出 
(7i 一 1)?/2 的 数 基 也 是 速率 为 1 的 指数 随机 变量 . 

因此 , 概括 起 来 , 我 们 有 生成 一 个 速率 为 1 的 指数 随机 变量 和 一 个 独立 的 标准 
正 态 随机 变量 的 如 下 算法 . 

步骤 1: 生成 一 个 速率 为 1 的 指数 随机 变量 六 . 

步骤 2， 生 成 一 个 速率 为 1 的 指数 随机 变量 Y2. 

步骤 3: 如 果 久 一 (Yi 一 1)?/2 > 0, 则 取 立 = 殉 -( 玫 -1)2/2, 并 且 转 向 步 又 
4. 否则 转向 步骤 1. 

步骤 4: 生成 一 个 随机 数 U, 并 且 取 


上 面 生成 的 随机 变革 Z 和 Y 是 独立 的 , 2 是 均值 0 和 方差 1 的 正 态 随 机 变量 , 了 
是 速率 为 1 的 指数 随机 变量 . (如 果 我 们 需要 正 态 随机 变量 有 均值 4 和 方差 0?, 只 
需 取 02 + 4). 
注 (i) 由 于 c= V2e/z 心 1.32, 因此 上 面 的 步骤 2 要 求 一 个 具有 均值 为 1.32 的 几 
何 分 布 的 重复 次 数 . 
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(i) 步骤 4 最 后 的 随机 数 不 必 另行 模拟 , 更 可 取 的 是 从 前 面 使 用 的 任意 一 个 随 
机 数 的 第 一 位 数字 得 到 . 即 , 假设 我 们 生成 一 个 随机 数 来 模拟 一 个 指数 随机 变量 , 则 
我 们 可 以 剥 除 这 个 随机 数 的 初始 数字 , 而 只 使 用 余下 的 数字 (将 十 进 小 数 点 向 右 移 
一 步 ) 作为 随机 数 . 如 果 这 个 初始 数字 是 0、1、2、3、4 (或 者 0, 如 果 计 算 机 生成 二 
进 数 字 ), 那么 , 我 们 取 2 的 符号 为 正 , 而 在 其 他 情形 取 2 的 符号 为 负 . 

( 诈 ) 如 果 我 们 要 生成 一 系列 标准 正 态 随机 变量 ,那么 ， 我 们 可 以 用 在 步 又 3 中 
得 到 的 指数 随机 变量 作为 步骤 1 中 生成 下 一 个 正 态 随机 变量 需要 的 指数 随机 变量 . 
因此 , 平均 地 , 我 们 可 以 通过 生成 1.64 个 指数 随机 变量 和 计算 1.32 次 平方 , 来 模拟 
一 个 单位 的 标准 正 态 随机 变量 . 

11.2.3 ”风险 率 方法 
令 下 是 连续 的 分 布 函数 且 F(0) =1. 由 
-4 
Xt) = Fl ‘>° 
可 以 定义 FF 的 风险 率 函数 A(t) (其 中 f(t) = F(t) 是 密度 函数 ). A(t) 表示 , 给 定 已 
经 存活 到 时 刻 t 的 一 个 寿命 分 布 为 FF 的 产品 在 时 刻 上 失效 的 瞬时 概率 强度 . 


现在 假设 我 们 给 定 了 一 个 有 界 函数 和 (t), 使 得 小 A(t)dt = co, 我 们 要 求 模拟 一 


个 以 Xb) 为 风险 率 函 数 的 随机 变 基 5. 
为 此 取 和 使 得 
A(t) < 和 A， 对 于 一 切 t+>0 


为 了 由 A(t)(t > 0) 模拟 , 我 们 将 
(a) 模拟 一 个 具有 速率 ^ 的 泊 松 过 程 . 我 们 将 只 “接受 ” 或 “计数 " 某 种 泊 松 事 
件 . 特别 地 , 我 们 将 
(b) 独立 于 其 他 的 一 切 , 以 概率 A(t)/ 和 计数 一 个 在 t 发生 的 事件 . 
现在 我 们 有 以 下 命题 . 
命题 11.3 第 一 个 被 计数 的 事件 的 时 间 ( 记 为 5) 是 一 个 随机 变量 , 其 分 布 有 风险 
率 函 数 A(t),t > 0. 
证 明 
P{t<S<t+dtls >t} 
三 P{ 第 一 个 被 计数 的 事件 在 (t,t+ dt) 中 | 在 t 前 没有 事件 被 计数 } 
= 了 { 泊 松 事件 在 (tt + dt) 中 , 且 被 计数 | 在 上 前 没有 事件 被 计数 } 
三 P{ 泊 松 事件 在 (t+ dt) 中 , 且 被 计数 } 
= [MXdt 十 oldDl 2 = M(t)dt + o(dt) 
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这 就 完成 了 证 明 . 注意 倒数 第 二 个 等 式 得 自 泊 松 过 程 的 独立 增 其 性 质 . 
因为 速率 为 和 的 泊 松 过 程 的 到 达 间 隔 时 间 是 速率 为 和 的 指数 随机 变量 . 因此 ， 
从 例 11.3 和 上 述 命题 推出 , 下 面 的 算法 将 生成 一 个 具有 风险 率 函数 和 A(t) (t > 0) 的 
随机 变量 . 
生成 5 : 和 s(t) = A(t) 的 风险 率 方法 
取 和 使 得 对 于 一 切 +> 0 有 X(t) < 入. 生成 随机 变量 列 对 Ui, Xi,i > 1, 使 得 X; 
是 速率 为 ^ 的 指数 随机 变量 , 而 Ui 是 (0,1) 均匀 随机 变量 , 停止 在 


wm 位 避 < (Fx) 八 


N 
S= xX 国 
i=1 


为 了 计算 ELN], 我 们 需要 一 个 以 瓦尔 德 方程 命名 的 结果 , 它 叙 述 为 , 如 果 X1, XX2,…… 
是 独立 同 分 布 的 随机 变量 , 它们 按 序列 地 被 观察 直到 一 个 随机 时 间 NN, 那么 


E 区 | = E[N]E[X] 


更 确切 地 说 , 令 Xi, XX2,… 是 独立 同 分 布 的 随机 变量 , 并 且 考 虑 下 面 的 定义 . 
定义 11.1 ”一 个 整数 值 随 机 变 基 N 称 为 对 于 Xi, XX2,… 的 一 个 停 时 , 如 果 对 于 一 
切 n=1,2,…, 事件 {N = m} 独立 于 Xn+i,Xn+2… 

直观 地 , 我 们 按 X 的 次 序 序列 地 观察 , 且 以 N 记 在 停止 前 的 观察 次 数 . 对 于 一 
切 n = 1,2,…, 如 果 NN = m, 那么 ,在 观察 XX!,…,Xn 之 后 , 且 在 观察 Xn+1, Xn+2,…… 
之 前 , 我 们 已 经 停止 了 . 
例 11.6 令 Xn(n=1,2,…) 是 独立 的 , 而且 


P{X, =0} =P{X, =1}= $ i 


置 


如 果 我 们 令 

N= min{n: Xi ++ Xn = 10} 
那么 N 是 一 个 停 时 . 我 们 可 以 将 N 看 成 一 个 连续 地 抛掷 一 枚 均匀 硬币 的 试验 , 而 
且 当 正面 的 次 数 达到 10 时 停止 的 停 时 . 四 
命题 11.4( 瓦 尔 德 方程 ) 如 果 Xi1,X2,… 是 具有 有 限期 望 的 独立 同 分 布 的 随机 变 
量 , 且 如 果 N 是 对 于 X1,X2，,… 的 一 个 停 时 使 得 EIN] < oo, 那么 


E 区 | = E[NJE[X] 
n=1 
证 明 令 


11.3 模拟 连续 随机 变量 的 特殊 方法 549 


pa 1, 车 N>n 
” 10o, 若 N<n 
我 们 有 
N oo 
X= DXnh 4 
n=1 n=1 
因此 


E 六 | =E xn = py E[Xn1n] (11.3) 


n=1 
然而 , 1% = 1 当 且 仅 当 在 我 们 连续 地 观察 X1,…, Xn-1 之 后 还 没有 停止 . 所 以 , I 
由 XY，,…，Xn-1 确定 , 故而 独立 于 Xn. 于 是 由 方程 (11.3) 我 们 得 到 


E > 元 |= SS E[Xn]E[I;] 


n=1 


=E[X] > ”En] 
n=1 


=E[X]E 3 
n=1 


回 到 风险 率 方法 , 我 们 有 过 
5S= xX 
‘1 


因为 N=min {n: Un 和 和 (并 六 Xi) /和 ,由 此 推出 事件 N=n 独立 于 Xn+1, Xn+2，… 


因此 , 由 瓦尔 德 方程 ， I 
lsl= EINIEIX = CI 


从 而 
EIN] = AE[3] 


其 中 E[S] 是 所 要 的 随机 变量 的 均值 . 
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各 种 特殊 的 方法 被 设计 用 于 模拟 来 自 大 多 数 通常 的 连续 分 布 的 随机 变量 ， 现 
在 我 们 介绍 其 中 的 一 部 分 . 
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11.3.1 正 态 分 布 
以 XX 和 YY 记 和 独立 的 标准 正 态 随 机 变量 , 因此 有 联合 密度 函数 
i 
f(z,y) = ae (SH)/2, oo0o<z<o0,-o0<y<o0 


现在 考虑 点 (X,Y) 的 极 坐标 . 如 在 图 11.1 所 示 
R=X?+Y’?, ©@=tan-!Y/X 


R=X:+Y? 
日 =tan1JIX 


图 11.1 


为 了 得 到 R? 和 6 的 联合 密度 , 考虑 变换 
d=zz+3j2，6=tan-ly/z 


这 个 变换 的 雅 可 比 行列 式 是 
ed Gd 
本 页 25 2y 
7=| 8 60 |= 1 LE 二 
名 名 | | rr ( 动 二 全 
了 y 
=2 y 了 一 2 


+R z+ 


因此 , 由 2.5.3 节 知 , R? 和 6 的 联合 密度 由 


1 -da2l _1-421 
db) = 二 i es 8<2: 
fr2,e(d,0) © 3 3° 27 0<d<oo,0< 


给 出 . 于 是 , 我 们 可 以 得 出 , R? 和 6 独立 , 且 R 有 速率 为 的 指数 分 布 和 © 是 
(0 2r) 上 的 均匀 分 布 . 
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现在 让 我 们 从 极 坐标 反 向 地 到 直角 坐标 . 从 上 面 知 如 果 我 们 以 速率 为 1/2 的 指 
数 随机 变量 W (W 起 R? 的 作用 ) 以 及 独立 于 W 的 (0,2r) 上 均匀 随机 变量 V(V 
起 6 的 作用 ) 开始 , 那么 X = VWWcosV,Y = VW sinV 将 是 独立 的 标准 正 态 随机 
变量 . 因此 利用 例 11.3 的 结果 , 我 们 看 到 如 果 U1 和 U2 是 独立 的 (0,1) 均匀 随机 变 
基 , 那么 
X = (-2ln U1)/? cos(2rU2)， ! 
Y = (-2lnU)?sin(2xU,) 
是 独立 的 标准 正 态 随机 变量 . 
注 X2+XY2 有 速率 为 1/2 的 指数 分 布 这 个 事实 非常 重要 , 因为 由 卡 方 分 布 的 定 
义 , X? 十 Y? 有 2 个 自由 度 的 卡 方 分 布 . 因此 , 这 两 个 分 布 是 相同 的 . 
上 面 生成 标准 正 态 随机 变量 的 方法 , 称 为 博克 斯 - 马 勒 方法 . 由 于 它 需 要 计算 上 
面 的 正弦 值 和 余弦 值 而 使 它 的 有 效 性 大 大 降低 . 然而 , 有 一 个 绕 过 这 种 潜在 的 时 耗 
困难 的 方法 . 作为 开始 , 注意 若 U 在 (0,1) 上 均匀 分 布 , 则 2U 在 (0,2) 上 均匀 分 布 ， 
从 而 2U -1 在 (-1,1) 上 均匀 分 布 . 于 是 , 如 果 我 们 生成 随机 数 Vi 和 Uo, 并且 令 


Vi=20—1, WW=2U02—1 
那么 (Vi, V2) 在 以 (0,0) 为 中 心 的 面积 为 4 的 正方 形 上 均匀 分 布 ( 见 图 11.2). 
(LU 


(11.4) 


CL,D) 


K+ 


CD 一 4 
"= (0, 0) 
*=(V,h) 


图 11.2 


现在 假设 我 们 连续 的 生成 这 样 的 (Vi, 太 ) 对 , 直到 得 到 一 对 包含 在 以 (0,0) 为 
中 心 半径 为 1 的 图 内 , 即 直到 (Vi,W%) 使 得 好 十 如 < 1. 于 是 这 样 的 (Vi,W) 在 圆 
内 均匀 分 布 . 如 果 我 们 以 瓦 吾 记 这 对 的 极 坐标 , 那么 容易 验证 五 与 杏 独 立 , ?在 
(0,1) 上 均匀 分 布 , 而 百 在 (0,2x) 上 均匀 分 布 . 
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由 于 
从 到 


V+W V+ 译 
因此 由 方程 (11.4) 推出 , 我 们 可 以 通过 生成 男 一 个 随机 数 UV 以 及 令 
X=(-2InU0) /2V/R, Y=(-2InU)/2W/R 
生成 独立 的 标准 正 态 随机 变量 X 和 工 . 
事实 上 , 因为 ( 取 条 件 好 十 好 < 1) 素 在 (0,1) 上 均匀 , 且 独 立 于 豆 , 我 们 可 
以 用 它 代 替 生 成 一 个 新 的 随机 数 U, 然后 证 明 


于 = (-2im 丽 2)!2W/ 尽 = (= 


—2lnS 
s 


sinG = 亿 / 瓦 = ，cos6©=Vi/R= 


Y =(-2In Re?)!/2V2/R = 


人 友 


是 独立 的 标准 正 态 随机 变量 , 其 中 
S=R=V?+ 认 
总 之 , 我 们 有 生成 一 对 独立 的 标准 正 态 随机 变 基 的 以 下 方法 . 
步骤 1: 生成 随机 数 和 Uz. 
步骤 2: 令 V=201 一 1,WW=202-1,S=WV+V2. 
步骤 3: 若 5 > 1, 则 返回 步骤 1. 
步骤 4: 得 到 独立 标准 正 态 随机 变 基 


—2lnS —2lnS 
xs rv- /ss 


上 面 的 方法 称 为 极 坐标 方法 ， 由 于 在 上 面 的 正方 形 中 的 随机 点 落 入 单位 圆 中 
的 概率 等 于 x/4 ( 圆 的 面积 除 以 正方 形 的 面积 ), 因此 , 极 坐标 方法 平均 地 需要 重复 
4/r s 1.273 次 步骤 1. 因此 , 它 生成 两 个 独立 的 标准 正 态 随机 变 基 , 平均 地 需要 用 
2.546 个 随机 数 , 取 一 次 对 数 , 求 一 次 平方 根 , 作 一 次 除法 , 作 4.546 次 乘法 . 


11.3.2” 伽 马 分 布 ; 


为 了 对 参数 为 (n", A) 的 伽 马 分 布 模拟 , 其 中 n 是 整数 , 我 们 利用 n 个 速率 为 
和 的 独立 整数 随机 变量 的 和 也 具有 这 样 分 布 的 事实 . 因此 , 若 矶 ,…, Un 是 独立 的 
(0,1) 均匀 随机 变 基 , 则 


有 具有 所 要 的 分 布 . 
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当 n 大 时 , 有 其 他 可 行 的 技术 而 并 不 需要 那么 多 的 随机 变量 . 一 种 可 能 是 用 拒 
绝 法 , 且 将 g(z) 取 为 具有 均值 m/A (因为 这 是 伽 马 分 布 的 均值 ) 的 指数 随机 变 基 的 
密度 . 可 以 证 明 对 于 大 的 n, 拒绝 算法 需要 的 平均 重复 次 数 是 e[(n 一 1)/2mj1/2. 另外 ， 
如 果 我 们 需要 生成 一 系列 伽 马 随机 变量 , 那么 正如 例 11.4 那样 , 我 们 可 以 安排 使 得 
在 接受 时 , 不 仅 得 到 一 个 伽 马 随 机 变量 , 而 且 无 代价 地 得 到 一 个 指数 随机 变量 ， 它 可 
以 用 于 得 到 下 一 个 伽 马 随机 变量 (见习 题 8). 

11.3.3” 卡 方 分 布 

nn 个 自由 度 的 卡 方 分 布 是 X= 9 十 … 十 如 的 分 布 ,其 中 2i(i = 1,…,n) 是 独 
立 的 标准 正 态 随机 变量 . 利用 在 3.1 节 最 后 的 注 中 所 说 明 的 事实 , 我 们 看 到 2? + 23 
有 速率 为 1/2 的 指数 分 布 . 因此 , 当 n 是 偶数 时 (例如 n = 2k) X31 有 参数 (k,1/2) 
的 伽 马 分 布 . 因此 , -2In (IT Ui) 有 自由 度 为 2k 的 卡 方 分 布 . 我 们 可 以 通过 模拟 
一 个 标准 正 态 随机 变量 Z, 然后 加 2? 到 前 述 分 布 来 模拟 一 个 自由 度 为 2k 十 1 的 卡 
方 随机 变 基 . 就 是 说 ， 
Xt1 = 2 —2In (ie 


其 中 ZU，…,Un 都 是 独立 的 , Z 是 标准 正 态 随机 变 基 , 而 其 他 的 都 是 (0,1) 均 
随机 变 基 . 


11.3.4 ”贝塔 分 布 (8(n,m) 分 布 ) 


随机 变 基 X 称 为 具有 参数 n 和 m 的 6 分 布 , 如 果 它 的 密度 由 
(n+m—1)! 
f=- 葬 

给 出 模拟 上 述 分 布 的 一 个 方法 是 令 1,…,Un+m-1 是 独立 的 (0,1) 均匀 随机 变 
基 , 而 考虑 这 个 集合 中 的 第 n 最 小 值 记 之 为 U(n). 现在 Un) 将 等 于 z, 如 果 在 
这 nn 十 m 一 1 个 随机 变 基 中 有 

(nn 一 1 个 小 于 zz; 

人 的 一 个 等 于 了 

(ii) m 一 1 个 大 于 z. 
因此 , 如 果 这 n+ m 一 1 个 均匀 随机 变量 分 成 为 3 个 大 小 分 别 为 n 一 1、1、m 一 1 的 
子 集 , 那么 第 一 个 集合 中 的 每 个 变量 都 小 于 z、 第 二 个 集合 中 的 变量 等 于 z 而 且 第 
三 个 集合 中 的 每 个 变量 都 大 于 z 的 概率 由 


(P{U <zj)” :fu(z)(P{I >2)™ 一 zz 


给 出 . 因此 , 由 于 共有 (n 十 mm 一 1)1/(n - D)!(m 一 了 )! 种 可 能 的 分 法 , 所 以 [tn) 是 参 
数 为 n 和 m 的 8 随机 变量 . 


zl1(1—2)"™!, 0<z<1 
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于 是 , 从 8 分 布 模拟 的 一 种 方法 是 , 在 m + 和 一 1 个 随机 数 中 找 出 第 n 小 的 一 
个 . 然而 , 当 和 m 都 大 时 , 这 种 做 法 并 不 特别 有 效 . 

另 一 种 方法 是 考虑 一 个 速率 为 1 的 泊 松 过 程 , 并 且 回忆 到 , 给 定 第 n+m 个 事 
件 到 达 的 时 刻 Sn+m, 前 n 十 m 一 1 个 事件 的 时 间 的 集合 独立 地 在 (0, Sn+m) 上 均 
匀 分 布 . 因此, 给 定 Sn+m, 前 n +m 一 1 个 事件 的 时 间 中 的 第 n 小 的 一 个 (就 是 
Sn) 与 n 十 m 一 1 个 (0, Sn+m) 上 均匀 随机 变量 中 的 第 n 小 的 一 个 具有 同样 的 分 布 . 
但 是 , 从 上 面 我 们 可 以 得 出 Sn/Sn+m 有 参数 和 m 的 8 分 布 的 结论 . 所 以 , 如 果 
号 ,…,Untm 是 随机 数 ， 


-mv 

二 是 参数 为 (n,m) 的 贝塔 随机 变量 . 
-ln II U 

el 


将 上 述 写 成 n 
—lnIlU: 
i=1 
三 下 在 贡 = 运 生态 
i=1 i=n+1 
我 们 看 到 它 与 X/(X+Y) 有 相同 的 分 布 , 其 中 X 和 了 分 别 是 有 参数 (n,1) 和 (m, 1) 


的 伽 马 随 机 变 基 . 因此 , 当 ”和 m 都 大 时 , 我 们 可 以 通过 先 模拟 两 个 伽 马 随机 变量 
来 模拟 一 个 贝塔 随机 变 基 . 


11.3.5 ”指数 分 布 一 冯 ' 诺 伊 曼 算法 


如 我 们 看 到 的 , 速率 为 1 的 指数 随机 变量 可 以 通过 计算 一 个 随机 数 的 对 数 的 负 
值 来 模拟 ， 然 而 , 多 数 计算 机 中 计算 一 个 对 数 的 程序 包含 短 级 数 展开 , 所 以 如 果 存 
在 计算 上 更 容易 的 第 二 种 方法 将 是 有 用 的 . 我 们 现在 介绍 由 冯 : 诺 伊 曼 给 出 的 方法 . 

作为 开始 , 令 1,U2,… 是 独立 的 (0, 1) 均匀 随机 变 基 , 并 且 定义 N(N >2) 为 


和 =minfn:m>z>…>Un-i<rUn} 
即 N 是 首 个 比 它 前 面 大 的 随机 数 的 下 标 . 现在 我 们 计算 N 和 Ui 的 联合 分 布 : 


1 
PN > <y} =| PIN > m0 < yo = sd 
0 
3 
=| P{N > nlUi = zx}dr 
0 


给 定 古 = z, 如 果 z > 到 … > Un, N 将 大 于 m, 或 者 等 价 地 , 如果 
(a) [ri 和 z，1i 一 2 


(b) 到 >… 关 Cn 
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和 将 大 于 n. 现在 , (a) 以 概率 z" :! 发 生 , 并 且 给 定 中 时 , 因为 U2,…, Un 所 有 可 


的 (n 一 了 )! 种 排序 是 等 可 能 的 , 所 以 (b) 以 概率 二 发 生 . 因此 
zl 
P{N>mlD =zl= rei 
[9 
从 而 y n—1 mn 
PIN>m0<dj= 上 i 
所 以 
P{N=n,U <y}=P{N>n-lU sy -PIN>nU <y) 
二 We 
(n-D)! nl! 
在 一 切 偶数 上 求 和 , 我 们 看 到 
PEN 是 偶数 ,Vi < 由 一 J 一半 + 区 一半 le (5) 


现在 我 们 已 经 对 生成 速率 为 1 的 指数 随机 变量 的 以 下 算法 做 好 了 准备 

步骤 1: 生成 均匀 随机 数 ,U2,…, 在 N= min{fn: Ui >.… > Un-l < Un} 
停止. 

步骤 2: 如 果 N 是 偶数 , 则 接受 此 次 运行 , 并 且 转 向 步骤 3. 如 果 N 是 奇数 , 则 
拒绝 此 次 运行 , 并 且 返 回 步骤 1. 

步骤 3: 置 X 等 于 失败 ( 即 拒绝 ) 的 运行 次 数 加 上 在 成 功 ( 即 接受 ) 运行 中 的 首 
个 随机 数 . 

为 了 证 明 X 是 速率 为 1 的 指数 随机 变量 , 首先 注意 , 由 方程 (11.5) 中 取 y = 
知 , 一 次 成 功 的 运行 的 概率 是 

P{N 是 偶数 } = 1 一 e 
现在 , 为 了 X 超过 z, 前 四 ] 次 运行 必须 都 没有 成 功 , 而 且 下 一 次 运行 必须 , 或 者 不 
成 功 , 或 者 成 功 但 是 有 U1 > z 一 [z] (其 中 [z] 是 不 超过 z 的 最 大 整数 ). 因为 
P{N 是 偶数 , U1 > y} =P{N 是 偶数 } 一 P{N 是 偶数 , U1 < y} 
=1—e-!—(l1-eY)=ey—e-! 


我 们 看 到 
P{X > z} = er 四 [e-1+ere- 四 ) el]=e-” 
这 就 导出 结论 . 
以 T a 因为 每 次 试验 以 概率 1 一 e-! 为 成 
功 , 由 此 推出 了 是 均值 为 -一 6 的 几何 随机 变量 . 如 果 我 们 以 Ni 记 在 第 i 次 运 
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行 中 所 用 的 均匀 随机 数 的 个 数 , i > 1, 那么 了 (是 首 个 使 Ni 是 偶数 的 i) 是 这 个 序列 
的 一 个 停 时 . 因此 由 瓦尔 德 方程 , 这 个 算法 需要 的 均匀 随机 数 的 平均 个 数 由 
和 
E | = E[N]JE[T] 
i=1 
给 出 . 现在 


EIN = YPN >n} =1+ PU >:… > Un} 
n=1 


n=0 


总 
=1+ D1/nl=e 


n=1 


所 以 和 
E 三 | = Tr ~ 43 


因此 , 从 计算 方面 说 , 这 个 算法 非常 容易 施行 , 需要 平均 约 4.3 个 随机 数 来 完成 . 


11.4 ”离散 分 布 的 模拟 


所 有 从 连续 分 布 模拟 的 一 般 方法 在 离散 情形 都 有 其 对 应 的 版 本 . 例如 , 如 果 我 
们 要 模拟 一 个 具有 概率 质量 函数 


P{X=2}=B, j=1,2…, Dp=1 
了 
的 随机 变 基 X. 我 们 可 以 用 逆 变 换 技术 的 如 下 的 离散 版 本 ， 
为 了 模拟 具有 P{X = zj} = 已 的 XX 
令 尽 在 (0, 1) 上 均匀 地 分 布 , 且 令 


z1， 若 U< 嘱 
7T2， 若 P<U<P+PB 


jl i 
zj， 车 DP <U<D_P 

1 1 
因为 


让 
per- =? (Sn<0<Ea}-5 
i=1 i=1 
我 们 看 到 X 有 所 要 的 分 布 . 
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例 11.7( 几 何 分 布 ) ”假设 我 们 要 模拟 X, 使 得 
P{X=i}=p(1—p)"!, i>1 
因为 Ri 
DP{X=i}=1-P{X>j-1}=1-(1-pi 
i=1 
我 们 可 以 模拟 这 样 的 随机 变量 , 通过 生成 一 个 随机 数 UV, 且 令 X 等 于 这 样 的 值 ;使 
1-(1-p’ 1<U<1-(1-p) 
或 者 , 等 价 地 使 
(= <1-U<(t-p 
因为 1-U 与 UV 有 相同 的 分 布 , 于 是 我 们 可 以 定义 六 为 
X=min{j:(1—p) <0}=min {3:7> yy} =1+ [| 
正如 在 连续 情形 , 对 于 更 为 常用 的 离散 分 布 , 已 经 发 展 了 特殊 的 模拟 技术 , 现 
在 我 们 给 出 几 个 例子 . 
例 11.8( 模 拟 二 项 随机 变量 ) ”二 项 (n,p) 随机 变 基 最 容易 模拟 , 只 要 回忆 起 它 能 


够 表示 为 n 个 独立 的 伯 努 利 随机 变量 的 和 即 可 . 就 是 说 , 若 可 ,…, Un 是 独立 (0, 1) 
均匀 随机 变 基 , 则 令 


由 此 推出 X = 学 -1 Xi 是 以 和 2 为 参数 的 二 项 随机 变量 . 

这 个 程式 的 一 个 困难 是 需要 生成 n 个 随机 数 . 为 了 显示 怎样 减少 所 需 随机 数 
的 个 数 , 首先 注意 到 这 个 程式 并 未 用 到 一 个 随机 数 U 的 确切 值 , 而 只 用 到 它 是 否 超 
过 p. 利用 这 一 点 与 给 定 UV < p 时 UV 的 条 件 分 布 在 (0,p) 上 均匀 , 以 及 给 定 U>p 
时 了 的 条 件 分 布 在 (p,1) 上 均匀 的 结果 , 我 们 现在 说 明 如 何 只 用 一 个 随机 数 来 模拟 
一 个 二 项 (mwP) 随机 变量 . 

步骤 1: 令 a=1/p,8=1/(1-p). 

步骤 2: 置 上 = 0. 

步骤 3: 生成 一 个 均匀 随机 数 U. 

步骤 4: 若 k=n, 则 停止 . 否则 重 置 大 一 大 十 1 

步骤 5: 若 U < p, 则 置 Xk = 1, 并且 重 置 U=aU. 若 避 >P, 则 置 X=0, 并 
且 重 置 U = B(U 一 p). 返回 步骤 4. 
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整个 程式 生成 X1,…, Xn, 而 X = ji_1 Xi 是 所 要 的 随机 变量 . 它 通过 注意 是 
Ur <p, 还 是 Us >p 来 工作 ; 在 前 一 种 情形 取 Ui+1 等 于 Uk/p, 而 在 后 一 和 
Uk+l 等 于 (Uk 一 Pp)/(1 一 p).2 
例 11.9( 模 拟 泊 松 随机 变量 ) ”为 了 模拟 一 个 速率 为 ^ 的 泊 松 随机 变量 , 生成 人 
均匀 随机 变 基 Di,Vz,…… 停止 在 


w+i=am 人 站 nc<e} 
i=1 
随机 变量 N 有 所 要 求 的 分 布 , 这 可 以 由 注意 到 
Nm {nD < 
i=1 


看 出 . 但 是 -InU; 是 速率 为 1 的 指数 随机 变量 , 从 而 如 果 我 们 将 一 lnUi(i > 1) 解 
释 为 一 个 速率 为 1 的 泊 松 过 程 的 到 达 间 隔 时 间 , 我 们 看 到 N = N(A) 将 等 于 在 时 刻 
入 前 的 事件 个 数 . 因此 , N 是 均值 为 和 的 泊 松 随机 变量 . 

当 入 大 时 , 上 面 模拟 速率 为 1 的 泊 松 过 程 在 时 刻 和 前 的 事件 个 数 N(A) 时 , 我 
们 可 以 减少 计算 量 , 通过 首先 选取 一 个 整数 m, 并 且 模 拟 泊 松 过 程 的 第 m 个 事件 的 
时 间 Sm, 然后 按 给 定 Sm 时 N(A) 的 条 件 分 布 模拟 N(A). 现在 给 定 Sm 时 N(A) 的 
条 件 分 布 如 下 : 

NN)ISm =s~m 二 P( 和 一 s)， 如 果 s < 入 


NOlsn=s~B 人 (m 一 1， 23), 如 果 s > 入 
其 中 ~ 表示 “与 … 有 相同 的 分 布 "(P(A) 是 参数 为 的 泊 松 随机 变 基 , B(n,p) 是 
参数 为 n 和 p 的 二 项 随机 变量 ). 这 是 由 于 如 果 第 m 个 事件 在 时 刻 s 发 生 , 其 中 
s < 入 那么 , 直至 时 刻 和 为 止 的 事件 数 是 m 加 上 在 (s, 和) 中 的 事件 数 . 另 一 方面 ， 
给 定 Sm = s 时 前 m 一 1 个 事件 发 生 的 时 间 的 集合 与 m 一 1 个 (0,s) 均匀 随机 变量 
的 集合 有 相同 的 分 布 ( 见 5.3.5 节 ). 因此 , 当 入 < s 时 , 直至 时 刻 和 为 止 的 事件 数 是 


具有 参数 m 一 1 和 2 的 二 项 随机 变量 . 于 是 , 我 们 可 以 模拟 N( 和 ) 如 下 : 通过 首先 
模拟 Sm， 然后 或 者 当 Sm < 入 时 模拟 均值 为 和 一 Sm 的 泊 松 随机 变 甚 P( 和 一 5m), 或 
者 当 Sm > 和 时 模拟 参数 为 m 一 1 和 字 的 二 项 随机 变量 B((m 一 1, 和 /Sm); 并 且 置 


_ m+P(A-Sm)， 若 Sm < 和 
N= { B(m 一 1, 和 /Sm)， 若 Sm > 入 


@ 因为 计算 机 的 会 入 误差 , 当 n 大 时 , 单个 随机 数 不 应 该 持续 地 使 用 . 
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在 上 面 , 我 们 发 现 令 m 近似 于 A 在 计算 中 是 有 效 的 . 当然 , 当 m 大 时 , Sm 可 由 一 


个 计算 快 的 模拟 FT(m, 和 ) 分 布 的 方法 模拟 的 ( 见 11.3.3 节 ). 
离散 分 布 也 有 拒绝 法 和 风险 率 方法 , 我 们 把 它 留 作 练习 . 可 是 , 我 们 有 一 种 模 
拟 有 限 离散 随机 变量 的 技术 ( 称 之 为 别名 方法 ), 尽管 建 模 需要 一 些 时 间 , 但 是 运行 
起 来 非常 快 . , 
别名 方法 
在 下 面 , 量 P、P、Q(O(k < n 一 1) 表示 在 整数 1,2,…,n 上 的 概率 质量 函 
数 一 一 即 , 它们 是 非 负 的 且 和 为 1 的 n 维 向 量 . 另外 , 向 其 PW 至 多 有 个 非 零 
分 基 , 且 每 一 个 8 至 多 有 2 个 非 零 分 基 . 我 们 证 明 任 意 一 个 概率 质量 函数 P 可 
以 表示 为 相同 权重 的 n 一 1 个 概率 质量 函数 Q( 每 一 个 至 多 有 2 个 非 零 分 基 ) 的 混 
合 分 布 . 就 是 说 , 我 们 证 明 对 适当 地 定义 的 QQ，…,Q-, PP 可 以 表示 为 


1 n—l 
P= (11.6) 
k=1 


作为 得 到 这 个 表达 式 的 方法 的 一 个 介绍 的 前 奏 , 我 们 需要 下 述 简单 的 引 理 , 它 的 证 
明 留 作 一 个 习题 . 
引 理 11.5 ”以 尸 ={P,i= 1……,m} 记 一 个 概率 质量 函数 , 则 

(a) 存在 一 个 记 1<i<n, 使 得 P<1/(n 一 1), 而 且 

(b) 对 于 这 个 i, 存在 一 个 六 关 记 使 得 Pi 十 PP >>1/(n 一 1). 

在 介绍 得 到 方程 (11.6) 的 表示 式 之 前 , 让 我 们 通过 一 个 例子 来 说 明 它 . 
例 11.10 ”考虑 具有 局 =7/16, 忆 =1/2,P=1/16 的 3 点 分 布 书 . 我 们 由 选取 满 
足 引 理 11.5 条 件 的 i 和 j 开始 . 因为 PB < 1/2 和 忆 十 忆 >1/2, 我 们 可 以 用 i=3 
和 j= 2 操作 . 我 们 定义 一 个 2 点 质量 函数 QW 将 所 有 的 权重 都 给 予 点 3 和 点 2， 
而 且 使 得 P 能 够 用 相等 的 权重 表示 成 QW 与 另 一 个 2 点 质量 函数 QC) 的 混合 . 
其 次 , 点 3 的 所 有 质量 都 包含 在 QW) 中 . 因为 我 们 有 


B=3(0P 1+), j=12,3 (11.7) 
并 且 , 由 上 面 假设 @9 等 于 0, 所 以 我 们 必须 取 
QP =2p=$, P=1-QP=B P=0 
为 了 满足 方程 (11.7), 我 们 必须 置 
和 7 
QW =0, QP =2P -5=8 QF=2P=3 


因此 , 在 这 种 情形 我 们 有 所 要 的 表示 . 现在 假设 原来 的 分 布 是 4 点 质量 函数 : 


送 1 来 3 
n= B= Pes Berg 
现在 , PR < 1/3 且 P+ PL > 1/3. 因此 我 们 的 初始 2 点 质量 函数 (Q0)) 将 集中 
在 点 3 和 1( 不 给 点 2 和 4 以 权重 ). 因为 最 后 的 表示 将 给 QW 权重 1/3, 而 另外 的 
Q9)0 = 2,3) 将 不 给 值 3 以 任何 质量 ， 我 们 必须 有 
(1) Kg! 
3 =PB=3 
因此 ， 
ands 


3 
8 8 


= 
同样 , 我 们 可 以 写 出 
P= 390 ES SP 
其 中 为 了 满足 上 式 , PS) 必须 是 向 量 
中 


(3) _3p _3 
P2 =5=P 8 
P 包 = 0， 

3 _ 3 9 
P=5R= 丰 


注意 P9) 不 给 值 3 以 任何 质量 . 现在 我 们 可 以 将 质量 函数 P) 表示 为 2 点 质 基 函 
数 Q 和 QG) 的 相等 权 重 的 视 合 , 且 我 们 结束 于 
P= 190 +2 6 QW + jo")= i(o® +QO+QG) 

人 国 

上 面 的 例子 概要 地 列 出 了 对 于 点 质量 函数 忆 写成 形 如 方程 (11.6) 的 一 般 程序 ， 
其 中 QW 是 质量 函数 , 它 所 有 的 质量 都 给 出 在 至 多 2 个 点 上 . 作为 开始 , 我 们 选取 
满足 引 理 11.5 的 i 和 j. 我 们 现在 定义 QW 集中 在 点 i 和 j, 且 包 含 点 i 的 所 有 质 
量 , 注意 到 , 在 方程 (11.6) 的 表示 中 , 对 于 上 = 2,…,n 一 1 有 Q/*) = 0, 它 导致 

QD =(n- DR 所 以 Q? =1-(n- DP 


将 它 写成 1 
en+ 2 py (11.8) 
其 中 Po rt 我 们 着 到 
Ppl" =0, 
(nD) 一 (0 A 1 
4 n— (二 9 )=2 (a+B- i) 


名 一 二 


Pr -33Pe， ki 或 j 
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容易 验证 上 式 确实 是 一 个 概率 质量 函数 一 一 例如 , PI” 的 非 负 性 得 自由 了 的 选 
取 使 得 P+ P; > 1/(n 一 1) 的 事实 . 
我 们 现在 可 以 在 n 一 1 以 委 号 夺 攻 表 烧 PC-1 上 重复 上 面 的 程序 得 到 
Po-D 一 + ed 3 Pl"-2) 
pe 


而 这 样 由 方程 (11.8)， 人 
P=- n+ + 2 pe- 2) 


我 们 现在 对 P"™” 人 全 类 二 人 引得 到 
Poi ut 


用 这 样 的 方法 , 可 以 将 忆 生机 n 一 1 个 2 点 分 布 的 混合 . 我 们 现 
在 能 够 容易 地 从 忆 模拟 : 通过 首先 生成 一 个 等 可 能 地 取 1,2,…,n 一 1 中 的 一 个 什 
的 随机 变量 N. 如 果 结果 的 值 N 使 得 QLY 在 点 iw 和 jw 上 设置 正 的 权重 , 那么 
若 第 二 个 随机 数 小 于 QW*), 我 们 可 以 置 X 等 于 in, 而 在 其 他 情形 , 置 X 等 于 jw. 
于 是 随机 变量 X 就 有 概率 质量 函数 P. 就 是 说 , 我 们 有 从 PP 模拟 的 如 下 的 程序 . 

步骤 1; 生成 ,并 且 令 N= 1+ [(n 一 Di]. 

步骤 2: 生成 U2, 并 且 令 

ed ie 
jw， 其 他 

注 (i) 上 面 的 方法 称 为 别名 方法 ,因为 经 过 对 @ 的 重新 编号 , 我 们 总 可 以 安排 得 
使 对 于 每 个 上 有 QW > 0. ( 即 我 们 可 以 安排 得 使 第 大 个 2 点 分 布 在 值 上 上 有 正 的 
权重 ). 因此 , 这 个 程序 要 求 模拟 等 可 能 地 取 1,2,…,n 一 1 的 N, 且 如 果 N 二 k, 则 
或 者 接受 为 六 的 值 , 或 者 接受 的 “别名 ”为 的 值 (也 就 是 , 8 给 出 正 的 权 
重 的 另 一 个 值 ). 

(ii) 实际 上 , 在 步骤 2 中 不 必 生 成 新 的 随机 数 . 因为 N 一 1 是 (mn 一 1)U 的 整 
数 部 分 ,由 此 推出 余下 的 部 分 (n -1)Ui 一 (N - 1) 独立 于 Uni 而 且 在 (0,1) 上 均 
匀 分 布 ， 因 此 ， 不 用 生成 一 个 新 的 随机 数 U2, 我 们 可 以 用 (n 一 Di 一 (N 一 1) = 
(n— DU -Ion=-IlDD]. 
例 11.11 ”让 我 们 回 到 例 11.2 的 问题 , 其 中 考虑 含有 n 个 未 必 不 同 的 项 目的 列表 . 
每 个 项 目 有 一 个 值 ( 记 v(i) 为 在 位 置 i 的 项 目的 值 ) 而 我 们 有 兴趣 估计 


人 (i)/m(i) 


其 中 m(i) 是 在 位 置 i 的 项 目 在 列表 中 出 现 的 次 数 . 简 言 之 , v 是 在 列表 中 的 (不 同 
的 ) 项 目的 值 的 和 . 


562 第 11 章 模 拟 


为 了 估计 w 注意 到 如 果 X 是 一 个 随机 变量 使 
P{X= 守 = v0)/ 0), es 


j=1 
那么 

El/m(X)] = Se - =%/ Bo 
因此 ,我们 可 以 用 别名 (或 者 任何 其 他 的 ) 方法 生成 与 X 同 分 布 的 随机 变 基 Xi,… 
Xi 然后 用 


n 区 
ve ED 0) D1/m(X) 
j=1 i=1 
估计 ~ 图 


11.5 随机 过 程 


我 们 可 以 通过 模拟 一 系列 随机 变量 来 模拟 一 个 随机 过 程 . 例如 模拟 到 达 间 隔 分 
布 F 的 一 个 更 新 过 程 的 前 t 个 时 间 单 位 , 我 们 可 以 模拟 具有 分 布 F 的 随机 变量 
X1,X2,…, 停止 在 

N=min{n: Xi1+:…+ Xn >t} 

其 中 Xi(i > 1) 表示 更 新 过 程 的 到 达 间 隔 时 间 , 那么 上 面 的 模拟 产生 至 t 为 止 的 
NN 一 1 个 事件 一 一 发 生 在 时 刻 Xi Xi 十 XX2,…, Xi 十 … 十 XN-1 的 事件 . 

实际 上 , 存在 另 一 种 非常 有 效 的 模拟 泊 松 过 程 的 方法 . 假设 我 们 要 模拟 速率 为 
入 的 泊 松 过 程 的 前 t 个 时 间 单 位 . 为 此 我 们 可 以 首先 模拟 直至 t 为 止 的 事件 的 个 数 
NGb), 然后 利用 在 给 定 N(t) 的 值 时 N(t) 个 事件 的 时 间 集合 的 分 布 正如 n 个 独立 
的 (0, 均匀 随机 变 基 的 集合 的 结果 . 因此 , 我 们 从 模拟 一 个 均值 为 Xt 的 泊 松 随机 
变量 N(t) 开始 (用 例 11.9 中 给 出 的 任意 一 种 方法 ). 于 是 , 如 果 N(t) =n, 则 生成 
个 随机 数 的 一 个 新 的 集合 ( 记 为 1,…,Un) 且 {tU1,…,tUn} 将 表示 对 个 事件 的 时 
间 , 如 果 我 们 能 够 在 此 停止 , 这 将 比 模拟 指数 分 布 的 到 达 间 隔 时 间 更 为 有 效 . 然而 ， 
我 们 通常 要 求 事件 的 时 间 具 有 增加 的 次 序 , 例如 , 对 于 s < 


NN(s) = Ui 的 个 数 : tUi < s 


从 而 在 计算 N(s)(s < t) 时 , 最 好 在 乘 t 之 前 首先 将 加 ,…, Un 排序 . 然而 , 在 这 样 
做 的 时 候 , 你 不 应 该 用 通常 的 排序 算法 , 如 快速 排序 ( 见 例 3.14), 而 更 合适 的 是 考虑 
被 排序 的 元 素来 自 (0,1) 均匀 总 体 . 这 样 的 n 个 (0,1) 均匀 变 基 的 一 个 排序 算法 如 
下 : 不 用 长 度 为 ”的 单个 列表 的 排序 , 我 们 将 考虑 n 个 有 序 的 (或 者 相关 联 的 ) 随机 
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大 小 的 列表 . 将 值 UV 放 在 列表 i, 如 果 它 的 值 在 (i 一 1)/n 与 im 之 间 , 即 U 放 在 列 
表 InU] +1 中 . 单个 的 列表 就 这 样 被 排序 , 而 所 有 列表 的 全 部 连接 就 是 要 求 的 次 序 . 
因为 几乎 所 有 nt 个 列表 都 相对 地 小 (例如 , 如 果 n = 1000, 列表 的 大 小 大 于 4 的 平均 


数 (用 二 项 分 布 的 泊 松 近似 ) 近似 等 于 1000 (1 路。 ) = 人 ,单个 列表 的 排序 是 


很 快 的 , 所 以 这 个 算法 的 运行 时 间 与 n 成 比例 ( 比 最 好 的 通用 排序 算法 的 ninn 更 
好 ) 

建 模 中 的 一 个 极其 重要 的 计数 过 程 是 非 时 齐 的 泊 松 过 程 , 它 放宽 了 泊 松 过 程 的 
平稳 增 其 假 定 . 这 样 允许 到 达 率 不 是 常数 而 可 以 随时 间 变 化 的 可 能 性 . 然而 , 对 于 
假定 非 时 齐 的 泊 松 到 达 过 程 很 少 有 分 析 研究 , 其 简单 的 原因 就 是 这 样 的 模型 常常 在 
数学 上 不 易 处 理 . (例如 , 在 一 条 单 服务 线 假定 有 非 时 齐 的 泊 松 到 达 过 程 的 指数 服务 
时 间 的 排队 模型 中 , 顾客 平均 延迟 没有 已 知 表达 式 .)? 显然 这 样 的 模型 是 模拟 研究 
的 强势 候选 者 . 


11.5.1 ”模拟 非 时 齐 泊 松 过 程 
现在 介绍 模拟 具有 强度 函数 Xt) (0 < t < co) 的 非 时 齐 泊 松 过 程 的 三 种 方法 . 
方法 1 抽样 一 个 泊 松 过 程 
模拟 强度 函数 Xt) 的 非 时 齐 泊 松 过 程 的 前 T 个 时 间 单 位 . 令 和 使 得 


A(t) < X， 对 于 所 有 上 < 了 工 
现在 , 正如 在 第 5 章 中 所 展示 的 , 这 个 强度 函数 A(t) 的 非 时 齐 泊 松 过 程 可 以 由 速率 
入 的 泊 松 过 程 的 事件 时 间 , 经 过 一 个 随机 的 选取 生成 . 就 是 说 , 如 果 速 率 和 的 泊 松 过 
程 在 时 刻 上 发 生 的 一 个 事件 以 概率 A(t)/ 和 被 计数 , 那么 被 计数 的 事件 是 一 个 强度 函 
数 为 A(t) (0 < t < 7) 的 非 时 齐 泊 松 过 程 . 因此 , 通过 模拟 一 个 泊 松 过 程 , 然后 随机 
的 计数 这 个 事件 , 我 们 可 以 生成 所 要 的 非 时 齐 泊 松 过 程 . 我 们 于 是 有 下 面 的 程序 : 

生成 独立 随机 变量 Xi, U1,X2,U2,…, 其 中 X; 是 速率 和 的 指数 随机 变量 , 而 

Ui 是 随机 数 , 停止 在 

Nmin {Dx >7}. 

i=1l 


现在 对 于 j=1,…,N 一 1, 令 


1， 若 Uj < 和 (sx) A 
五 = 这 1 
0， 其 他 


@ 一 个 假定 非 时 齐 泊 松 到 达 过 程 而 且 在 数学 上 易于 处 理 的 排队 模型 是 无 穷 服务 模型 . 
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J={j:D=1} 
于 是 , 在 时 间 集 合 (人 Xi:je 小 发 生 事件 的 这 个 计数 过 程 构成 所 要 的 过 程 . 
上 面 的 程序 被 称 为 减弱 算法 (因为 它 “前 荡 了 ”时 齐 泊 松 过 程 的 点 ), 当 A(t) 在 
整个 区 间 上 接近 于 和 时 , 显然 在 被 拒绝 的 事件 次 数 最 少 的 意义 下 是 最 有 效 的 . 于 是 ， 
一 个 明显 的 改进 是 将 区 间 分 割 为 子 区 间 , 然后 在 每 个 子 区 间 上 用 这 个 程序 . 就 是 说 ， 
确定 合适 的 值 k,0 < <to <…<tk<T,A 和 1…, 和 +1 使 得 


A(s) < 和， 当 ti-1<s<t,i=1,…,k+1 (其 中 t=0,ter1=7T) (11.9) 


现在 , 在 区 间 (ti-tt) 通过 生成 速率 为 Xi 的 指数 随机 变量 , 并 且 以 概率 Xs)/Ai 接 
受 在 时 刻 s,s e (ti) 发 生 的 事件 以 模拟 非 时 齐 泊 松 过 程 . 因为 指数 随机 变 基 的 
无 记忆 性 质 , 以 及 一 个 指数 随机 变量 的 速率 可 以 通过 乘 以 一 个 常数 改变 , 所 以 , 从 一 
个 子 区 间 到 下 一 个 子 区 间 并 没有 损失 有 效 性 . 换 句 话说 , 如 果 我 们 在 t € [ti-1, ti)， 
并 且 生 成 一 个 速率 为 Xi 的 指数 随机 变革 X 使 得 上 + X > 如 那么 我 们 可 以 用 
入 [XX 一 (上 一 级 /Ai 作为 下 一 个 速率 为 和 i+1 的 指数 随机 变量 . 于 是 , 当 关系 (11.9) 
满足 时 , 我 们 有 生成 前 t 个 单位 时 间 的 强度 函数 和 (s) 的 非 时 齐 泊 松 过 程 的 下 述 算 
法 . 在 此 算法 中 , t 表示 目前 的 时 间 , 且 了 是 目前 的 区 间 ( 即 , 当 ti-1 < t < 时 ， 
I=i). 

步骤 1: 上 = 0,T= 1. 

步骤 2: 生成 一 个 速率 为 Xi 的 指数 随机 变量 X. 

步骤 3: 如 果 t 上 t+X < tr 重 置 上 = 上 + X, 生成 一 个 随机 数 U， 如 果 U < 
A 和 (t)/A1, 那么 接受 事件 时 间 t. 返回 步 又 2. 

步骤 4: (在 上 +X > tr 时 到 达 的 步 又 ) 若 了 = 上 二 1, 则 停止 ， 否 则 , 重 置 
针 =[XX 一 (t1 一 和 /A 重 置 上 = 二 和 工 = 工 +1, 转向 步骤 3. 

现在 假设 在 某 个 子 区 间 (&-1,ti) 上 有 和 ; > 0, 其 中 


Ai =inf{AXs) :ti1 < s <t} 


在 这 种 情形 , 我 们 不 应 该 直接 用 减弱 算法 , 而 更 合适 的 是 , 在 所 要 的 区 间 上 首先 模拟 
速率 为 Ai 的 泊 松 过 程 , 然后 当 s e (ti-1,) 模拟 强度 函数 为 Xs) 一 入 ; 的 非 时 齐 泊 
松 过 程 . (生成 泊 松 过 程 中 超出 了 边界 的 最 后 一 个 指数 随机 变 基 不 必要 浪费 , 它 可 以 
经 适当 的 变换 后 再 使 用 .) 两 个 过 程 的 又 加 (或 合并 ) 就 产生 了 在 这 个 区 间 上 所 要 的 
过 程 . 这 样 做 的 原因 是 , 对 于 平均 事件 数 为 和 (ti 一 龙 -1) 的 泊 松 分 布 数 , 会 节省 必需 
的 均匀 随机 变量 : 例如 , 考虑 情形 


Ms)=10+s, 0<s<1 
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以 和 = 11 用 减弱 方法 将 生成 期 望 数 为 11 个 事件 , 每 一 个 需要 一 个 随机 数 以 决 
定 是 否 接受 它 。 另 一 方面 , 生成 一 个 速率 为 10 的 泊 松 过 程 , 然后 合并 一 个 速率 为 
和 (s) = s,0 < s < 1 的 非 时 齐 泊 松 过 程 , 将 产生 等 分 布 的 事件 数 , 但 是 需要 检查 决定 
是 否 接受 的 期 望 次 数 等 于 1. 

另 一 种 模拟 非 时 齐 泊 松 过 程 更 加 有 效 的 途经 是 利用 登 加 . 例如 , 考虑 过 程 


exp{t?}, 0<t<1.5 
A(t) = 4 exp{2.25}, 1.5<t<2.5 
exp{(4—t)?}, 2.5<t<4 


在 图 11.3 中 给 出 了 它 的 强度 函数 的 图 形 . 模拟 直到 时 刻 4 为 止 的 这 个 随机 过 程 的 
一 个 途径 是 , 首先 在 这 个 区 间 生 成 速率 为 1 的 泊 松 过 程 ; 然后 在 这 个 区 间 生 成 速率 
为 。- 1 的 泊 松 过 程 , 并 且 接受 在 (1, 3) 中 的 所 有 事件 , 而 对 于 不 在 (1, 3) 中 的 时 
刻 + 的 事件 则 以 概率 时! 接受 ， 然 后 在 区 间 (1, 3) 上 生成 速率 为 cz25 - e 的 


泊 松 过 程 , 并 且 接受 在 1.5 2.5 之 间 的 所 有 事件 , 而 对 于 不 在 这 个 区 间 的 时 刻 t 的 
事件 则 以 概率 2 二 2 接受 . 这 些 过 各 的 避 加 就 是 所 要 的 非 时 齐 泊 松 过 程 换 句 话 


说 , 我 们 所 做 的 事 是 将 Ab 分 解 为 以 下 的 非 负 部 分 


Xt) =A(t) + M(t) + X(t), 0O<t<4 


其 中 


A(t) 一 1，0<t<1 
M2(t) = e 一 1 1<t<8 
At) 一 1，3<t<4 
Mt)—e, 1<t<1.5 
e235—e 15<t<2.5 
Mt)—~e, 2.5<t<3 
0, 3<t<4 


其 中 减弱 算法 (在 每 种 情形 以 单个 区 间 减 弱 一 次 ) 应 用 于 模拟 组 成 的 非 齐 次 泊 松 过 
程 . 


X(t) = 
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1 


速率 MD 
口 一 bwhaweac、vo 三 


0 1 3 4 
图 11.3 
方法 2 到 达 时 间 的 条 件 分 布 
回想 一 下 速率 为 的 泊 松 过 程 的 结果 , 给 定 直到 时 刻 7 为 止 的 事件 数 时 , 事件 
的 时 间 集 合 是 独立 同 分 布 的 (0,T) 上 均匀 随机 变量 . 现在 假设 这 些 事件 中 在 时 刻 t 
发 生 的 每 一 个 都 以 概率 Mt)/A 计数 . 因此 , 在 给 定 被 计数 的 事件 数 时 , 推出 这 些 被 
计数 的 事件 时 间 是 独立 的 , 具有 相同 的 分 布 F(s), 其 中 
F(s) =P{ 时 间 < sl 被 计数 } 
_ P{ 时 间 < s, 被 计数 } 
P{ 被 计数 } 
T 
| P{ 时 间 < s, 被 计数 | 时 间 = z}dz/T 
一 P{ 被 计数 } 


加 上 和 A(z)dz 


让 入 (z)dz 


于 是 上 面 的 推理 (有 一 些 直观 ) 表明 , 给 定 非 时 齐 泊 松 过 程 直 到 时 刻 了 为 止 的 个 
事件 , 这 nn 个 事件 的 时 间 是 独立 的 , 具有 相同 的 密度 函数 


19=29， 0<s<T, m(r) = | Mads (11.10) 


由 于 直至 时 刻 了 为止 事件 数 N(T) 是 均值 为 m(T) 的 泊 松 分 布 , 我 们 模拟 非 时 齐 泊 
松 过 程 可 以 通过 首先 模拟 N(T), 然后 由 密度 (11.10) 模拟 N(T) 个 随机 变 基 . 

例 11.12 若 和 A(s)= 6s, 则 可 以 模拟 非 时 齐 泊 松 过 程 的 前 了 个 时 间 单 位 , 通过 首先 
模拟 有 均值 m(T) = | csds = cT?/2 的 泊 松 随机 变量 N(T), 而 后 模拟 具有 分 布 
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F(s)= Ta 人 


的 N(T) 个 随机 变量 . 具有 上 面 分 布 的 随机 变量 可 以 用 逆 变 换 方法 模拟 ( 因 
为 FI(U) = TVYD), 或 者 由 注意 到 当 V1 和 Us 都 是 独立 的 随机 数 时 ， 书 全 
max(TU1, TU2) 的 分 布 函数 模拟 . 

如 果 由 方程 (11.10) 给 出 的 分 布 函数 并 不 容易 求 道 , 我 们 总 可 以 从 方程 ci 
利用 拒绝 法 , 我 们 或 者 接受 或 者 拒绝 (0,T) 均匀 分 布 的 模拟 值 来 模拟 .就 是 说 , 令 
h(s)=1/T,0<s<T. 那么 

1) _ TN) XT - 

hs) mT) ~ mT) 
其 中 入 是 A(s)(0 < s < 7T) 的 一 个 界 . 因此 , 拒绝 法 是 生成 随机 数 和 U2, 然后 接 
受 TUi, 如 果 


f(TU') 


V2 < ED 


或 者 , 等 价 地 , 如 果 
wv < A 

方法 3 模拟 事件 的 时 间 

我 们 介绍 模拟 具有 强度 函数 Mt)(t > 0) 非 时 齐 泊 松 过 程 的 第 三 种 方法 , 这 可 能 
是 最 基本 的 方法 , 即 模拟 相继 事件 的 时 间 ， 所 以 , 将 这 样 过 程 的 相继 事件 时 间 记 为 
Xi, Xz,…。 因为 这 些 随机 变量 是 相互 依赖 的 , 所 以 我 们 利用 条 件 分 布 方法 作 模拟 . 
因此 , 我 们 需要 给 定 X1,…, Xi; 时 Xi 的 条 件 分 布 . 

首先 , 注意 , 如 果 一 个 事件 发 生 在 时 刻 z, 那么 独立 于 z 之 前 发 生 了 什么 , 直至 
下 一 个 事件 的 时 间 有 分 布 F 给 自 

瓦 (t) =P{ 在 (zx,z 十 上 中 有 0 个 事件 | 有 事件 在 2} 
=P{ 在 (z,z+ 四 中 有 0 个 事件 | 。 由 独立 增 量 


Se 
求 微 商 , 得 到 对 应 于 及 的 密度 是 
frlt) = Xz 十 bexp 仁 [| A(z+ wv} 
于 是 Fi 的 风险 率 函数 是 


我 们 现在 可 以 这 样 地 模拟 事件 时 间 X1, XX2,…: 通过 从 Fo 模拟 Xi; 如 果 XI 
的 模拟 值 是 z1, 用 从 Fi, 生成 的 一 个 值 加 上 zi 模拟 Xz, 且 如 果 X2 的 模拟 值 是 z?， 
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用 从 Fz 生成 的 一 个 值 加 上 z2 模拟 Xs, 如 此 等 等 . 由 这 些 分 布 用 于 模拟 的 方法 , 当 
然 依赖 于 这 些 分 布 的 形式 . 然而 , 有 趣 的 是 , 如 果 A(t) < 和 并 且 利用 风险 率 方法 模 
拟 , 那么 我 们 可 以 用 方法 1 完成 (我 们 将 这 个 事实 的 验证 留 作 习题 )， 然而, 有 时 分 
布 到 很 容易 地 求 道 , 因此 可 以 应 用 道 变换 方法 . 
例 11.13 假设 和 (z) =1/(z +a),z >0, 那 么 
和 r+att 

e+ou= In (Gz ) 
因此 
T+a _ t 


Et z+att 


从 而 


FW = (+0 
所 以 , 可 以 通过 生成 U1, U2,…, 而 后 置 


_ am 
和 = +) 


A X1 
而 一 般 地 
Xi= (Xi-1+a)T 奈 汪 为- i 
以 模拟 相继 事件 的 时 间 Xi,X2,… 四 
11.5.2 ”模拟 二 维 泊 松 过 程 

一 个 由 平面 中 随机 发 生 的 点 组 成 的 点 过 程 , 称 为 速率 的 二 维 泊 松 过 程 , 如 果 

(a) 在 任意 给 定 面积 为 4 的 区 域 中 的 点 数 是 均值 为 4 的 泊 松 分 布 ; 

(b) 在 不 相交 区 域 中 的 点 数 是 独立 的 . 

对 于 在 平面 中 给 定 的 固定 的 点 O, 我 们 现在 说 明 , 如 何 模拟 速率 为 的 二 维 泊 
松 过 程 在 以 O 为 中 心 " 为 半径 的 圆 形 区 域 中 发 生 的 事件 . 以 Ri(i > 1) 记 O 与 第 
;个 与 它 最 近 的 泊 松 点 的 距离, 而 以 C(a) 记 以 O 为 中 心 a 为 半径 的 贺 . 那么 

Pfr 有 > 喘 =P{R > VB =P{ 在 C(VWA) 中 无 点 } =e 
同样 , 以 Claz) - 9(w) 记 在 Caa) 与 C(ai) 之 间 的 区 域 ， 
P{frR2 — nxR? > blRi =7} 
=P{Ra > VOGT+ar3)/aIR =7} 
=P{ 在 C (VEB+z75)/) 一 C(r) 中 无 点 R=7} 
=P 人 {在 C (VEBTm 可 所 ) - Ct) 中 无 点 | 由 (b) 


=e-% 
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事实 上 , 可 以 重复 同样 的 推理 得 到 下 面 的 命题 . 
命题 11.6 以 Ro=0, 
NR? — xR? 1, i>1 

是 独立 的 加 率 为 和 的 指数 随机 变量 . 

换 句 话说 , 为 了 包围 一 个 泊 松 点 所 需要 穿 过 的 面积 的 若 , 是 速率 为 和 的 指数 随 
机 变量 , 由 于 对 称 性 , 各 个 泊 松 点 的 角度 是 独立 的 (0, 2x) 上 的 均匀 分 布 , 于 是 我 们 
有 模拟 以 O 为 中 心 7 为 半径 的 圆 形 区 域 中 泊 松 过 程 的 如 下 算法 . 

步骤 1: 生成 独立 的 速率 为 1 的 指数 随机 变 基 Xi, X2，… 停止 在 

N=mfn: att > 


步骤 2: 如 果 六 = 1, 则 停止 , 在 C(r) 中 没有 点 . 否则 , 对 于 i = 1 ……N-1 令 
Ri= V(X1t+:…+ Xi)/M 


步骤 3: 生成 独立 的 (0,1) 均匀 随机 变量 i,… ,Uni1. 
步骤 4: 返回 在 C(r) 中 的 N 一 1 个 泊 松 点 , 它们 的 极 坐标 是 


(Ri,2xU0i), i=1,.,N-1 


上 面 的 算法 平均 地 要 求 1+ Xrr2 个 指数 随机 变 基 和 同样 个 数 的 均匀 随机 数 . 另 
一 个 模拟 在 C(7) 中 的 点 的 算法 是 , 先 模拟 这 些 点 的 个 数 N, 然后 利用 给 定 N 时 这 
些 点 在 C(r) 上 均匀 分 布 这 个 事实 . 后 面 的 程序 要 求 模拟 一 个 均值 为 rer? 的 泊 松 随 
机 变 其 N; 然后 必须 模拟 N 个 在 C(r) 上 均匀 的 点 , 通过 由 分 布 Fr(a) = a?/r?( 见 
习题 25) 模拟 RR 和 由 (0,27) 均匀 分 布 模拟 9, 而 且 必 须 按 已 的 递增 次 序 给 这 N 个 
均匀 值 排序 . 第 一 个 程序 的 主要 优点 是 它 不 需要 排序 . 

上 面 的 算法 可 以 认为 是 以 O 为 中 心 的 圆 的 半径 连续 地 从 0 到 7 成 肩 形 散 开 . 
遇 到 泊 松 点 的 半径 被 相继 地 模拟 , 通过 注意 必须 包围 一 个 泊 松 点 的 附加 面积 总 是 独 
立 于 过 去 的 速率 为 的 指数 随机 变量 . 这 个 技术 可 以 用 于 模拟 这 个 过 程 在 非 圆 形 区 
域 中 的 事件 . 例如 , 考虑 一 个 非 负 函数 g(z), 并 且 假 设 我 们 有 兴趣 模拟 在 z 从 0 到 了 
的 z 轴 与 g 之 间 的 区 域 中 ( 见 图 11.4) 的 泊 松 点 过 程 . 为 此 我 们 可 以 从 左手 端 通过 考 


虑 相继 的 面积 [9 (z)dz 垂直 地 散 开 开始 . 现在 如 果 以 Xi < X2 < … 记 泊 松 点 在 
Zz 轴 上 相继 的 投影 , 那么 , 类 似 于 命题 11.6, 推出 当 Xo = 0 时 | ~ gla)dz, (i> 1) 


是 独立 的 速率 为 1 的 指数 随机 变 基 . 因此 , 我 们 应 应 该 模拟 独立 的 速率 为 1 的 指数 随 
机 变量 e1,e2,…, 模拟 停止 于 


T 
N=ain 人 :aa+ +e>A| sdz} 
o 
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而 且 由 a 
和 | sar =e,, 
0 


X2 
| g(z)dz =&2, 
Xi 


XN 
| g(z)dz =en-1 
> 


-2 


确定 Xi，…,Xw-1. 如 果 我 们 现在 模拟 独立 的 均匀 (0,1) 随机 数 三 ……,Uw-u 那 
么 , 因为 = 坐标 为 Xi 的 泊 松 点 在 y 轴 上 的 投影 是 在 (0,g(Xi)) 上 的 均匀 随机 变 基 ， 
所 以 , 在 这 个 区 间 上 模拟 的 泊 松 点 是 (Xi Uig(Xi)),i=1,…,N 一 1. 


7) 


图 11.4 


当然 , 在 函数 9 足够 正则 以 致 于 使 得 上 面 的 方程 可 以 解 出 X; 时 , 以 上 的 技术 
最 有 用 . 例如 , 若 g(z) = 4 (从 而 感 兴趣 的 区 域 是 矩形 ), 那么 
yh 


Xi 到 


1 一 1 人 一 1 


且 泊 松 点 是 
(XiyUi), i=1,.…,N-1 


11.6 ”方差 缩减 技术 


令 入 ，…, Xn 有 给 定 的 联合 分 布 , 并 且 假设 我 们 想 计算 
0 = Elyg(X1:…, Xn)] 
其 中 9 是 某 个 给 定 的 函数 . 经 常 出 现 的 情形 是 我 们 不 可 能 解析 地 计算 上 式 , 而 在 这 


种 情形 , 我 们 可 以 试图 利用 模拟 来 估计 0. 做 法 如 下 : 生成 与 X1,…,X 有 相同 的 
联合 分 布 的 X 四 ,…,，X4), 并 令 


Y=g(X,.…, XA) 
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现在 , 模拟 具有 X1,…, Xn 的 分 布 的 随机 变量 的 第 二 个 集合 ( 它 与 第 一 个 集合 独立 ) 
XXX 人 并 令 

=g(X1),.…, XO) 
继续 这 个 过 程 直到 生成 k( 某 个 预先 确定 的 数 ) 个 集合 , 从 而 也 计算 了 二,…, Yi. 现 
在 久 ,…, 卫 是 独立 同 分 布 的 随机 变量 , 每 一 个 都 与 9(X1,…, 外 ) 有 相同 的 分 布 
于 是 , 如 果 我 们 以 了 记 这 人 个 随机 变量 的 平均 , 即 


大 
了 = 》 人 k 
i=1 
那么 
EY]=0,  E[(Y —0)*]= Var(Y) 
因此 , 我 们 可 以 用 了 作为 9 的 一 个 估计 . 因为 了 和 9 之 间 差 的 期 望 平方 等 于 了 的 
方差 , 我 们 希望 这 个 量 尽量 地 小 .( 在 上 面 的 情形 , Var(Y) = Var(Y)/k, 通常 它 并 不 


是 预先 知道 的 , 而 必须 由 生成 值 产 ,… ,Yi 估计 .) 我 们 现在 介绍 3 种 缩减 我 们 估计 
的 方差 的 一 般 技 术 . 


11.6.1 “对偶 变量 的 应 用 


在 上 面 的 情形 , 假设 我 们 已 经 生成 了 具有 均值 9 的 同 分 布 Yi 和 Y. 现在 
Var (EH) = var09)+Var09)+2Cov0 73) = EY + Se 
因此 , 如 果 妈 和 3 不 是 独立 的 而 是 负 相 关 的 , 那么 这 就 很 有 利 的 (在 减 小 方差 的 
意义 下 ). 为 了 看 出 应 该 怎样 安排 , 我 们 假设 随机 变量 X1,… ,Xn 是 独立 的 , 并 且 每 
一 个 都 是 通过 道 变换 模拟 的 . 即 , 从 Fi (Ui) 模拟 Xi, 其 中 Ui 是 随机 数 , 且 是 
Xi 的 分 布 函数 . 因此 , Yi 可以 表示 为 


Yi = g(Fr (U0),*, Fl(Un)) 
现在 , 由 于 当 U 是 随机 数 时 , 1 一 U 也 在 (0, 1) 上 均匀 ( 且 与 UV 负 相 关 ), 由 此 推出 由 
¥ =gF7 (1 — U0),, Fr!(l— Un)) 


定义 的 玖 将 与 半 有 相同 的 分 布 . 因此 , 如 果 页 和 Yi 负 相关 , 那么 这 样 生成 的 名 
将 比 由 一 个 新 的 随机 数 集合 生成 导致 一 个 较 小 的 方差 . (另外 , 还 存在 计算 基 的 节 
省 , 因为 代 之 以 必须 生成 n 个 附加 的 随机 数 , 我 们 只 需 从 1 减 去 以 前 的 nn 个 中 的 每 
一 个 .) 下 面 的 定理 阐明 了 这 个 技术 的 关键 ( 称 为 对 偶 变量 的 应 用 ), 它 在 g 是 单调 函 
数 时 , 导致 方差 的 降低 . 

定理 11.1 如 果 X1,…, Xn 是 独立 的 , 那么 对 于 nn 个 变量 的 任意 增 击 数 和 g 有 


E[f(X)g(X)] > E[f(X)]E[g(X)] (11.11) 
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其 中 天 = (Xi1,…,Xn). 
证 明 ”对 n 进行 归纳 . 为 了 在 n= 1 时 证 明 它 , 令 f 和 g 是 单 变量 的 增 函 数 . 那么 ， 
对 于 任意 z 和 yy 有 

(f(x) — f(y))(g(7) — g(y)) > 0 


因为 若 z >y (z < y), 则 两 个 因子 都 是 非 负 ( 非 正 ) 的 . 因此 , 对 于 任意 随机 变 基 XX 
和 YY 有 
(f(X)— f(Y))(g(X)—g(Y)) >0 


由 此 推出 
E[(f(X)— f(Y))(g(X)—9(Y))] >0 


或 者 , 等 价 地 
E[f(X)g(X)] + E[f(Y)g(Y)] > E[f(X)g(Y)] + E[f(Y)g(X)] 
如 果 我 们 假设 X 和 了 是 独立 同 分 布 的 , 那么 , 因为 在 这 种 情形 
E[f(X)g(X)] = E[f(Y)g(Y)] 
E[f/(X)g(Y)] = E[f(Y)g(X)] = ELf(X)]Elg(X)] 
所 以 在 = 1 时 我 们 得 到 结果 . 
假定 (11.11) 对 n 一 1 个 变 基 成 立 , 且 现 在 假设 XX,…, Xn 是 独立 的 , 并 且 和 
9 是 增 函 数 . 那么 
E[f(X)g(X)|Xn = zn] 
=Elf(X1,……, Xn-1, Tn)g(X1,.**, Xn-1, Tn)|Xn = 2] 
=E[f(X1,…, Xn-1, Tn)g( Xi , Xn-1, Zn)] 由 独立 性 
> E[f(X1,…, Xn-1, Tn)]Elg(X1,…, Xn-1,Tn)] ”由 归纳 假设 
= Elf(X)|Xn = zn]Elg(X)|X", = zn] 
因此 
E[f(X)g(X)|Xn] > ELf(X)|Xn]Elg(X)|Xn] 
再 对 两 边 取 期 望 , 我 们 有 
E[f(X)9(X)] > E[E[f(X)IXn]Elg(X)|Xn]] > ELACX)]Elo(X)] 
最 后 的 等 式 成 立 是 因为 E[f( 关 )|X] 和 Elg( 头 )|Xn] 都 是 X, 的 增 函 数 , 所 以 由 n= 1 
的 结果 有 
E[E[f(X)|Xn]Elg(X)|Xn]] > E[ELfF(X)|Xn]]E[Elg(X)|Xn)] = EIf(X)ElgX)] m 
推论 11.7 如 果 U1,…,Un 是 独立 的 , 且 大 或 者 是 增 函 数 或 者 是 减 函 数 . 那么 
Cov(k(Ui,:-:, Un), k(1— Ui ,1— Un)) < 0 
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证 明 ”假设 函数 上 是 递增 的 . 因为 -k(1 一 可,…,1 一 Un) 关于 1,…,Un 递增 , 那 
么 , 由 定理 11.1， 
Cov(k(0 Un),-K1L 一 页 ,1 一 rz)) >0 


当 函 数 上 递减 时 , 只 需 将 大 代为 天 . 国 

由 于 Fn'(Ui) 是 Ui 的 增 函 数 (因为 五 是 分 布 函 数 , 是 递增 的 ), 所 以 只 要 9 
是 单调 函数 , g(F7 (0D)，… Fx!(Un)) 也 是 让 Un 的 单调 函数 ， 因 此 , 如 果 
4 单调 ,两 次 运用 随机 变 基 Ui,…,U 的 每 个 集合 的 对 偶 变 量 方法 ， 利 用 先 计算 
9 TOD ,Fr 1(Un)) 然后 计算 g(F (一 夯 ) Br!(1 一 Un)) 就 会 减少 估计 
Blg(X1,…，Xn)] 的 方差 . 就 是 说 , 不 用 生成 个 随机 数 的 上 个 集合 , 我 们 应 该 生成 
人 /2 个 集合 , 并 且 每 个 集合 使 用 两 次 . 
例 11.14( 模 拟 可 靠 性 函数 ) ”考虑 有 n 个 部 件 的 系统 , 部 件 i 独立 于 其 他 部 件 , 以 
概率 pi(i = 1,…,n) 在 工作 . 令 

和 -{ 1， 若 部 件 i 在 工作 
0， 其 他 情形 


假设 有 一 个 单调 的 结构 函数 $ 使 得 


[1， 荐 系统 在 Xi， ,Xu 下 工作 
so 0， 其 他 情形 
我 们 想 用 模拟 来 估计 

rp pn) = BIO(X1, .Xo)] = P{dCG,Xn) =1} 
现在 通过 生成 均匀 随机 数 蕊 ,…,U, 来 模拟 Xi, 然后 轩 

1， 着 Ui < pi 
= 
人 其 他 


因此 , 我 们 看 到 
PX1, ,Xn) 一 大 Cn) 


其 中 人 上 是 下，……Cm 的 减 函数 . 于 是 
Cov(k(U),k(1—U)) < 0 
从 而 用 太 ,… ,Un 生成 ED Cn) 和 (1 一 避 ,…,1 一 Un) 的 对 偶 方法 , 比 用 随 
机 数 的 一 个 独立 集合 生成 第 二 个 , 导致 更 小 的 方差. 国 
例 11.15( 模 拟 排队 系统 ) ”假设 一 个 给 定 的 排队 系统 , 并 且 以 D; 记 第 i 个 到 达 的 
顾客 在 排队 系统 中 的 延迟 , 假设 我 们 要 估计 
0 = ElDi+:…+ Dn] 
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以 XX ，,…,Xn 记 前 n 个 到 达 间隔 时 间 , 且 51,…, Sn 记 在 系统 中 的 前 n 个 服务 时 
间 , 并 且 假 设 所 有 的 这 些 随机 变量 都 是 独立 的 . 现在 , 在 大 多 数 系统 中 Di + … 十 Dr 
是 XX,… ,Xn, SSn 的 函数 , 例如 


Di+:*+Dn = 9g(X1,…, Xn,S1,.**, Sn) 


同样 , 通常 9 对 5; 递增 而 对 Xi(i = 1,…,n) 递减 ， 如 果 我 们 用 逆 变 换 方法 模 
拟 S5 Xi = 1,…,n( 例 如 ,Xi = Fr!(1 一 0),Si = GTDD 其 中 U3,…,Un, 
D1,…,Un 是 独立 的 均匀 随机 数 ), 那么 , 我 们 可 以 写成 

Di+:+ Dn = kU Un, U1, Un) 


其 中 上 是 其 变 基 的 增 函 数 . 用 对 偶 变量 方法 将 降低 估计 9 的 方差 . (于 是 , 我 们 生成 
Ui DUii = 1,…,n, 且 对 第 一 次 运行 置 X; = Fi!(1 一 太 ) 和 下 = G7(Di), 而 对 第 
二 次 运行 置 Xi = Fi 1(Ui) 和 Yi = G7 (1 一 i)). 然而 , 因为 所 有 的 Ui 和 Ui 都 是 
独立 的 , 这 等 价 于 在 第 一 次 运行 中 置 Xi = Ff!(U;),Y = GF!(D;), 而 在 第 二 次 运行 
中 用 1 一 Ui 代替 厂 , 用 1 一 TDi 代替 Di. 国 
11.6.2 ”通过 取 条 件 缩减 方差 
我 们 由 回忆 条 件 方差 公式 ( 见 命题 3.1) 
Var(Y) = E[Var(Y|2)] + Var(E[Y|2]) (11.12) 


开始 . 假设 我 们 有 兴趣 通过 模拟 苹 = (X1,… ,Xn) 然后 计算 Y = g(X1,… ,Xn)， 
用 以 估计 Elg(X1,…, Xn)]. 现在 , 如 果 对 于 某 个 随机 变 基 Z, 我 们 能 够 计算 E[Y|2]， 
然后 , 因为 Var(Y|2) > 0, 由 条 件 方差 公式 推出 
Var(E[Y|2]) < Var(Y) 
由 于 E[E[Y|2]] = E[Y], 它 导致 对 于 估计 E[Y] 而 言 , E[Y|2] 比 Y 更 好 . 
在 很 多 情况 下 , 有 许多 的 2; 可 以 用 于 取 条 件 , 以 得 到 改进 的 估计 . 每 一 个 这 样 
的 估计 E[Y12;] 都 有 均值 E[Y] 且 比 自然 估计 Y 有 更 小 的 方差 . 我 们 现在 证 明 , 对 
于 任意 选取 的 权重 入 ,和 i > 0, i 入 i = 1, 部 ;入 E[Y|21] 也 是 Y 的 一 个 改进 . 
命题 11.8 ”对 于 任意 Ni > 0, 和 P2; Xi = 1， 
(a) E [Di 和 NEY|2] = EY], 
(b) Var (5; ANE[Y|Zi]) < Var(Y). 
证 明 ”(a) 的 证 明 是 直接 的 . 为 了 证 明 (b), 以 NN 记 一 个 整数 值 随 机 变量 , 它 独 立 于 
所 有 被 考虑 的 其 他 随机 变量 , 且 使 得 
P{N=i}=N i>1 


两 次 运用 条 件 方差 公式 得 到 
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Var(y) > Var(E[Y|N, ZN]) > Var(E[E[Y|N, Zn]|21,:.]) = Var ( bp XEIYIa) 


例 11.16 考虑 一 个 以 泊 松 到 达 的 排队 系统 , 并 且 假 设 当 系统 中 已 经 有 N 个 其 他 
人 时 , 到 达 者 将 消失 . 假设 我 们 有 兴趣 用 模拟 来 估计 直到 t 为 止 消失 的 顾客 期 望 数 . 
自然 的 估计 方法 是 模拟 系统 直至 t 并 且 确 定 在 该 次 运行 中 消失 的 顾客 数 L， 然而， 
可 以 通过 对 在 [0, 中 系统 达到 最 大 容 基 的 总 时 间 取 条 件 得 到 一 个 更 好 的 估计 . 事 
实 上 , 如 果 我 们 以 了 记 在 [0, 中 系统 中 有 N 个 人 的 时 间 , 那么 

EILIT]= AT 


其 中 和 是 泊 松 到 达 率 . 因此 , 比 之 于 用 在 模拟 运行 中 所 有 工 的 平均 值 , 可 以 由 模拟 
运行 的 了 的 平均 值 乘 以 ^ 得 到 E[D] 的 一 个 更 好 的 估计 . 如 果 到 达 过 程 是 一 个 非 时 
齐 的 泊 松 过 程 , 那么 , 我 们 将 通过 追踪 系统 在 最 大 容量 的 时 间 阶 段 , 改进 工 的 自然 
估计 . 如 果 我 们 以 五 ，…',7c 记 在 [0,4] 中 系统 在 最 大 容量 时 的 时 间 区 间 , 那么 


c 
ElLIh,..., Ic] =>| 2 
isel 下 
其 中 Ms) 是 非 时 齐 泊 松 到 达 过 程 的 强度 函数 ， 上 式 右 端的 应 用 , 将 导出 E[L] 的 一 
个 比 自然 估计 工 更 好 的 估计 . 
例 11.17 ”假设 我 们 要 估计 排队 系统 中 前 n 个 顾客 在 系统 中 的 时 间 的 期 望 和 . 即 ， 
如 果 Wi 是 第 i 个 顾客 在 系统 中 待 的 时 间 , 那么 我 们 有 兴趣 估计 


以 Yi 记 在 第 i 个 顾客 到 达 时 刻 “ 系 统 的 状态 "， 可 以 证 明 ? 对 一 大 类 模型, 估计 
2 ElWilY] 比 导 ", Wi 有 (同样 的 均值 以 及 ) 更 小 的 方差 ， (应 该 注意 到 尽管 
ElWi|Y] 比 Wi 有 较 小 的 方差 是 直接 得 到 的 , 然而 , 因为 涉及 协 方差 项 , 并 ”ELHVz] 
比 党 "_, Wi 有 更 小 的 方差 并 不 是 显然 的 .) 例如 , 在 G/M/1 模型 中 


E[Wil¥] = (Ni + 1)/p 


其 中 Ni 是 第 ;个 到 达 者 遇 到 在 系统 中 的 人 数 , 且 1/k 是 平均 服务 时 间 ; 上 面 的 结果 
导出 对 于 在 系统 中 前 n 个 人 的 期 望 总 时 间 , ?1(Ni +ID 人 是 比 自然 估计 Di Wi 
更 好 的 估计 . 国 
例 11.18( 用 模拟 于 估计 更 新 函数 ) ”考虑 一 个 排队 模型 , 其 中 顾客 每 天 按 一 个 有 到 
达 间 隔 分 布 已 的 更 新 过 程 到 达 . 然而 , 假设 在 某 个 固定 的 时 刻 并 例如 下 午 5 点 , 不 


© S. M. Ross, “Simulating Average Delay - Variance Reduction by Conditioning,” Probability 
iin the Engineering and Informational Sciences 2(3), (1988), pp. 309-312. 
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再 允许 新 的 到 达 , 而 还 在 系统 中 的 顾客 继续 服务 . 在 第 二 天 的 开始 , 和 以 后 相继 的 
每 一 天 , 顾客 同样 按 更 新 过 程 到 达 . 假设 我 们 有 兴趣 确定 一 个 顾客 在 系统 中 的 平均 
时 间 . 利用 更 新 报酬 过程 理论 (以 每 了 个 单位 时 间 开 始 一 个 循环 ), 可 以 证 明 

一 个 顾客 在 系统 中 的 平均 时 间 二 了 [在 (0,7) 的 到 达 者 在 系统 中 的 时 间 和 |] 


m(T) 
其 中 m(7) 是 在 (0, 7) 中 的 期 望 更 新 次 数 . 

如 果 我 们 要 用 模拟 来 估计 上 面 的 基 , 一 次 运行 将 包括 模拟 一 天 , 我 们 观察 直至 
时 刻 了 为 止 的 到 达 人 数 N(T), 作为 模拟 运行 的 一 部 分 . 因为 EIN(T)] = m(7)， 
m(T) 的 自然 模拟 估计 是 得 到 的 N(T) 的 平均 (在 所 有 的 模拟 日 ). 然而 , 对 于 大 的 7， 
Var(N(T)) 与 了 成 比例 ( 它 的 渐 近 形式 是 To2/1a, 其 中 o? 是 方差, 而 / 是 到 达 间 
隔 分 布 F 的 均值 ), 从 而 对 于 大 的 T, 我 们 的 估计 的 方差 很 大 . 一 个 可 以 考虑 的 改进 
可 以 利用 解析 公式 ( 见 7.3 节 ) 


x 
m(T)=7-1 (11.13) 


E[Y(T, 
有 Sn 
得 到 , 其 中 Y(T) 记 从 了 直至 下 一 次 更 新 为 止 的 时 间 ( 即 , 在 了 的 剩余 寿命 ) 因为 
Y(T) 的 方差 不 随 了 增长 (事实 上 , 当 屎 的 矩 都 有 限时 , 它 收敛 于 一 个 有 限 值 ), 所 以 
对 于 大 的 7, 利用 模拟 来 估计 E[Y( 了 T)], 然后 用 方程 (11.13) 估计 m(T), 会 好 得 多 . 

然而 , 利用 取 条 件 , 我 们 将 进一步 改进 我 们 对 m(T) 的 估计 . 为 此 , 以 A(T) 记 
更 新 过 程 在 时 刻 T 的 年 龄 一 一 即 , 自 上 一 次 更 新 到 7 的 时 间 . 那么 不 用 Y(T) 的 
值 , 我 们 考虑 用 E[Y(T)|4(T)] 降低 方差 . 现在 知道 在 了 的 年 龄 等 于 z, 等 价 于 知道 
在 了 -zz 有 一 次 更 新 , 而 且 下 一 次 到 达 间 隔 时 间 X 大 于 zx. 由 于 在 了 的 剩余 寿命 等 
于 和 一 z( 见 图 11.5), 由 此 推出 
ElY(T)|A(T) =zj=EIX 一 zlX > 4] 


玉 2 9 


“Js PIX>e} 
_ 1-PF(t+2) 
| -| 
如 果 必 要 , 它 可 以 用 数值 同 值 
ee ee 
Tx ” T+XD 


图 11.5 A(T)=z 


作为 对 上 面 注 的 说 明 , 如 果 更 新 过 程 是 速率 为 和 的 泊 松 过 程 , N(T) 的 自然 模拟 
估计 将 有 方差 MT; 由 于 Y(T) 是 速率 为 入 的 指数 随机 变量 , 基于 (11.13) 的 估计 有 方 
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差 入 Var(Y(T)) = 1. 另 一 方面 , 由 于 Y(T) 独立 于 A(T)( 而 且 EIY(7T)|4(7T)] = 1/A)， 
所 以 改进 估计 E[Y(T)|4(T)] 的 方差 等 于 0. 就 是 说 , 在 这 种 情形 ， RLS 到 
的 年 龄 , 将 得 到 精确 的 答案 . 
例 11.19 考虑 M/G/1 排队 系统 , 其 中 顾客 按 速率 为 ^ 的 泊 松 过 程 到 达 一 和 
务 线 , 具有 均值 为 E[S] 的 服务 分 布 G. 假设 在 一 个 特殊 的 时 刻 ty, 服务 线 在 首次 时 
刻 t > to 暂停 , 这 时 系统 是 空闲 的 . 就 是 说 , 如 果 系 统 中 在 时 刻 t 的 顾客 数 是 X(t)， 
那么 服务 线 在 时 刻 
T=min{t>to: X(t)=0} 

将 暂停 . 为 了 更 有 效 地 利用 模拟 来 估计 E[T], 生成 到 时 刻 to 的 系统 ; 以 RR 记 在 时 
刻 to 在 服务 中 的 顾客 的 剩余 服务 时 间 . 而 令 Xe 等 于 在 时 刻 to 队列 中 等 待 的 顾客 
数 . (注意 及 等 于 0, 如 果 X(to) = 0 且 Xe = (X(to) 一 1)+.) 现在 , 记 N 为 在 剩余 
服务 时 间 RR 中 到 达 的 顾客 数 , 由 此 推出 , 如 果 N =n 并 且 Xe = noe, 那么 从 如 十 已 
到 服务 线 可 以 暂停 的 附加 时 间 的 数 莽 等 于 开始 于 ?+ ne 个 顾客 的 系统 到 空闲 为止 
所 用 时 间 的 数量 . 因为 这 等 于 n 十 ne 个 忙 期 的 和 , 由 8.5.3 节 推 出 

EI[TIR, N, X@] =to+ R+ (N+ Xa) 
从 而 

EITIR, X@] =EIEITIR, N, Xa]|R, XQ] 
=to+ R+(E[IN|R, Xo] + Xo)T 于 

一 如 十 尽 + (AR+ Xo)T 一 [5 一 二 加 
于 是 , 比 在 一 次 模拟 运行 中 用 生成 的 T 的 值 作为 估计 , 更 好 的 估计 是 在 时 刻 to 停止 


模拟 , 并 且 利用 估计 to + (AR + Xo)T 一 AEIST 国 


11.6.3 ”控制 变量 
同样 假设 我 们 要 用 模拟 来 估计 Elg(X)], 其 中 关 = (Xi1,…, Xn). 但 是 现在 假 
设 对 于 某 个 f, f(XX) 的 期 望 值 已 知 (例如 ELf(X)] = 儿 ). 那么 , 对 于 任意 常数 a, 我 
们 也 可 以 用 
=g(X)+a(f(X)—W) 
作为 Elg(X)] 的 估计 . 现在 ， 
Var(W) = Var(g(X)) +a?Var(f(X)) +2aCov(g(X), f(X)) 


简单 的 计算 说 明了 上 式 当 
_ -Cov(f(X),9(X) 
Var(f(X)) 
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时 达到 最 小 , 而 对 于 这 个 值 a 
Cov 00),9( x) 
Var(W) = Var(o(%)) ~ Co OS 
因为 Var(fOO) 和 Cov(f(X),g(X)) 通常 是 不 知道 的 , 所 以 应 该 用 模拟 的 数据 来 信 
计 这 些 二 
将 上 式 除 以 Var(g(X)) 得 出 
Var(W) _ 
VC 
其 中 Corr(X,Y) 是 X 和 了 之 间 的 相关 系数 . 因此 , 当 /(X) 和 g(X) 强 相关 时 ,使 
用 控制 变量 将 大 大 地 降低 模拟 估计 的 方差 
例 11.20 ”考虑 连续 时 间 的 马尔 可 夫 链 , 它 进入 状态 i 且 在 以 概率 Pi; (i > 0,j 去 1) 
转移 到 其 他 状态 之 前 , 在 该 状态 停留 一 个 速率 为 vi 的 指数 时 间 . 假设 只 要 链 处 于 状 
态 二 在 单位 时 间 以 C(i) > 0 付出 价格 . 以 X(b) 记 在 时 刻 + 的 状态 , 且 a 是 一 个 党 
数 使 0 < a < 1, 基 


1— Corr*(f(X),g(X)) 


W= 下 : eotC(X(t)dt 
0 


表示 总 折扣 价格 . 对 于 一 个 给 定 的 初始 状态 , 假设 我 们 要 用 模拟 来 估计 E[W]. 尽管 
因为 先 没有 模拟 连续 时 间 的 马尔 可 夫 链 无 穷 数 其 的 时 间 (这 显然 是 不 可 能 的 ), 似乎 
我 们 不 能 得 到 一 个 无 偏 估计 , 但 是 我 们 可 以 利用 例 5.1 的 结果 , 它 给 出 了 E[W] 的 等 
价 表达 式 ， 5 
EIW] = el cxo)dl 

其 中 了 是 一 个 速率 为 a 的 独立 于 马尔 可 夫 链 的 指数 随机 变 基 . 所 以 我 们 可 以 首先 

T 
生成 了 的 值 , 然后 生成 马尔 可 夫 链 到 了 为 止 的 状态 , 以 得 到 | C(X(t))dt 的 无 偏 


估计 . 因为 价格 率 都 是 非 负 的 , 所 以 这 个 估计 与 Z 有 强 的 正 相 关 , 这 样 就 得 到 一 个 
有 效 的 控制 变量 . 图 
例 11.21( 排 队 系 统 ) ”以 Dn+1 记 在 一 个 排队 系统 的 队列 中 的 第 m+ 1 个 顾客 的 延 
迟 , 排队 系统 的 到 过 间隔 是 独立 同 分 布 的 有 均值 J 的 分 布 已 , 且 服 务 时 间 是 独立 
同 分 布 的 有 均值 uc 的 分 布 G. 如 果 X; 是 在 第 i 个 到 达 者 与 第 i+ 1 个 到 达 者 之 间 
的 时 间 , 且 如 果 5; 是 顾客 i 的 服务 时 间 , i > 1, 那么 可 以 写 出 


Dnt+i = g(X1,***, Xn, S1,**, Sn) 


为 了 考虑 模拟 的 变量 X;, 5; 与 期 望 的 值 很 不 相同 的 可 能 性 , 令 


f (X17, Xn 51, Sn) = 》 5, 一生) 
i=1 
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因为 E[f(X, S)] =n(ke 一 pr), 所 以 可 以 用 
g(X,5)+alf(X,S)—n(pe — pF)] 


作为 EL[Dn+] 的 一 个 估计 . 由 于 Dn+1 和 了 都 是 5; - Xi 的 增 函 数 , = 1,…,n, 所 
以 由 定理 11.1 推出 j(X, 5) 和 D1 是 正 相关 的 , 所 以 a 的 模拟 估计 应 该 是 负 的 . 

如 果 我 们 要 估计 在 队列 中 前 N(T) 个 到 达 者 的 延迟 的 期 望 和 , 可 以 用 并 ?0 5; 
作为 控制 变 基 . 事实 上 因为 通常 假定 到 达 过 程 与 服务 时 间 是 独立 的 , 所 以 


N(T) 
E 区 | = E[SJE[IN(T)] 


其 中 EIN(T)] 或 者 可 以 用 7.8 节 中 建议 的 方法 计算 , 或 者 可 以 如 例 11.18 那样 由 模 
拟 估计 . 如 果 到 达 过 程 是 一 个 速率 为 和 (t) 的 非 时 齐 泊 松 过 程 , 则 也 可 以 使 用 控制 变 
莽 , 在 这 种 情况 下 ， - 
Ew =| At)dt mn 
0 


11.6.4 ”重要 抽样 


以 闫 =(X1,…,Xn) 记 随 机 变 基 的 一 个 向 基 , 具有 联合 密度 函数 (或 者 联合 质 
其 函数 , 在 离散 情形 )f(z)= f(z1,… ,zn), 并 且 假设 我 们 有 兴趣 估计 


9 = Eh(X)] = [am J(z)dz 


其 中 上 式 是 一 个 n 维 积分 . (如 果 Xi 都 是 离散 的 , 则 积分 解释 为 一 个 n 重 求 和 ). 

假设 直接 模拟 随机 向 基 X 使 得 计算 h( 藉 ) 的 值 低 效 , 其 可 能 是 因为 (a) 模拟 
一 个 具有 密度 函数 f(z) 的 随机 向 基 有 困难 , 或 (b) h( 夭 ) 的 方差 大 , 或 (c) 上 述 (a) 
和 (b) 的 结合 . 

另 一 种 可 用 来 模拟 估计 9 的 方法 是 , 注意 如 果 g(z) 是 另 一 个 概率 密度 函数 使 
得 只 要 g(z)= 0 就 有 f(z)= 0, 那么 我 们 可 以 表示 9 为 

0= [re =E, 区 (11.14) 
其 中 我 们 写 Es 以 强调 随机 向 基 XX 具有 联合 密度 g(z). 

由 方程 (11.14) 推出 , 9 可 以 通过 相继 地 生成 具有 联合 密度 g(z) 的 随机 向 其 X 
的 值 , 然后 用 A( 瑟 )7( 瑟 )/9( 瑟 ) 的 值 的 平均 作为 估计 . 如 果 一 个 分 布 密度 g(z) 可 以 
选取 得 使 随机 变量 A( 环 )f( 瑟 )/9( 瑟 ) 有 小 的 方差 , 那么 这 个 方法 ( 称 为 重要 抽样) 就 
能 够 产生 9 的 一 个 有 效 的 估计 . 

我 们 试图 得 到 为 什么 重要 度 抽样 有 用 的 一 种 感觉 ， 作 为 开始 , 注意 7(X) 和 
9( 头 ) 分 别 表示 当 随 机 向 量 环 具有 联合 密度 f 和 9 时 得 到 向 量 XX 的 可 能 性 . 因此 ， 
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如 果 XX 按 9 分 布 , 那么 它 通常 是 f( 关 ) 相对 于 g( 关 ) 小 的 情形 , 而 因此 当头 按 g 
模拟 时 , 似 然 比 fF(X)/9( 瑟 ) 比 1 小 . 然而 , 容易 检验 它 的 均值 是 1: 
» [0]- [re] 

于 是 我 们 看 到 , 即使 f(X)/9( 瑟 ) 通常 地 小 于 1, 但 它 的 均值 是 1. 于 是 意味 着 它 有 
时 候 大 , 所 以 倾向 于 有 大 的 方差 . 这 样 看 来 , 怎样 能 使 h( 关 )f( 关 )/g( 关 ) 有 小 的 方差 
呢 ? 回答 是 , 我 们 能 安排 选取 一 个 密度 g, 使 得 那些 使 f(z)/g(z) 大 的 值 = 恰 是 h(z) 
极度 地 小 的 那些 值 , 而 因此 比值 (六 )f( 关 )/g( 关 ) 总 是 很 小 . 由 于 这 将 要 求 h(z) 有 
时 很 小 , 重要 抽样 在 估计 一 个 小 概率 时 似乎 最 有 力 . 因为 在 这 种 情形 , 函数 h(z) 当 
2 取 值 于 某 个 集合 时 等 于 1, 而 在 其 他 情形 等 于 0. 

我 们 现在 考虑 如 何 选取 合适 的 密度 g. 我 们 发 现 所谓 的 倾斜 密度 是 很 有 用 的 . 


令 MU = Ele*]= raz 是 对 应 于 一 维 密度 f 的 矩 母 函数 . 
定义 11.2 ”密度 函数 


er f(z 
n=- 
称 为 的 倾斜 密度, -co < t < oo. 

具有 密度 fi 的 随机 变 基 , 当 上 > 0 时 , 倾向 于 大 于 有 密度 f 的 随机 变 基 , 而 当 
t < 0 时 , 倾向 于 小 于 有 密度 f 的 随机 变 基 . 

在 某 些 情形 , 倾斜 密度 ft 具有 与 密度 f 同样 的 参数 形式 . 
例 11.22 ”如 果 / 是 速率 为 和 的 指数 密度 , 那么 


fi(z) = Ce Xe =ACe 0 
其 中 C = 1/M(t) 不 依赖 于 z. 所 以 , 对 于 上 < 入 ,fi 是 速率 为 和 一 t 的 指数 分 布 . 
如 果 / 是 参数 为 p 的 伯 努 利 概 率 质量 函数 , 那么 
f(z)=p(1 -7) *, z=0,1 
因此 , M(t) = Eyle!X*] = pe! 十 1 一 p, 所 以 


Sm pe 下 (1-pP \™ 
f(z) = 1 (1 一 相 二 ”= (去 关 -) (二 让) (11.15) 


就 是 说 , ft 是 参数 为 


Pet 


a 
的 伯 努 利 概 率 质量 函数 . 
我 们 留 作 一 个 习题 证 明 , 如 果 了 是 参数 为 人 和 o? 的 正 态 密度 , 那么 九 站 


为 4+cxt 和 2 的 正 态 密度 . 
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在 某 些 情况 下 有 兴趣 的 基 是 独立 随机 变量 X1,… ,Xn 的 和 . 在 这 种 情形 联合 
分 布 f 是 一 维 密度 的 乘积 . 即 
f(T, Tn) = f(z1) fn(zn) 


其 中 三 是 X; 的 密度 函数 . 在 这 种 情况 下 , 使 用 一 个 共同 选取 的 , 按 它们 的 倾斜 密 
度 生成 Xi 常常 是 有 用 的 . 
例 11.23 令 Xi …Xn 为 独立 的 随机 变量 , 具有 各 自 的 概率 密度 (或 质量 ) 函数 
fi 对 于 i= 1,…,n. 假设 我 们 有 兴趣 于 对 它们 的 和 至 少 与 a 一 样 大 的 概率 作 近 似 ， 
其 中 a 要 比 这 个 和 的 均值 大 得 多 . 即 我 们 对 

909=P{S>a} 


感 兴趣 , 其 中 5 = i Xi, 并 且 a > i_1E[Xi. 如 果 3 > a, 令 I{S > a} 等 于 1， 
而 在 其 他 情形 令 它 为 0, 我 们 有 

b=ErlI{S> oj] 
其 中 了 = (及,…, fn)， 假 设 现 在 我 们 按 倾 斜 质 量 函 数 sti = 1,…,n) 模拟 Xi， 
t(t > 0) 的 值 待定 . 9 的 重要 抽样 估计 是 


Be Ns>q A 
9 fi(Xi) 
(Xi) _ _tX, 
et Oe 
从 而 


0=1I{S>a}M(t)e-'s 
其 中 M(t) = 了 TIMilt) 是 5 的 矩 母 函数 . 由 于 t>0 以 及 当 5<a 时 I{S > al 等 于 
0, 由 此 推出 
I{S>aje ss <e* 


从 而 
< M 人 be 


为 了 使 估计 的 这 个 上 界 尽 量 地 小 , 我 们 选取 tt > 0) 极 小 化 M(t)e-“. 为 此 , 我 们 
将 得 到 一 个 估计 , 在 每 次 迭代 时 其 估计 值 在 0 和 mint M(t)e-* 之 间 . 这 个 极 小 化 
的 志 记 为 世 , 可 以 证 明 它 使 得 


Be[ 引 = Er- | > xz| =a 
i=1 


在 上 式 中 , 其 中 我 们 想 要 的 期 望 值 是 在 假定 X; 的 分 布 为 ft. (i = 1,…,n) 下 取 的 . 
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例如 , 假设 X1,…, Xn 是 独立 的 伯 努 利 随 机 变量 , 对 于 i = 1,…,n 有 各 自 的 参 
数 pi, 那么 0= 了 P{S > a} 的 重要 抽样 估计 是 
6= TS > ae Le +1—pi) 
i=1 


由 于 pi 是 参数 为 pie!/(pie! + 1 一 pi) 的 伯 努 利 随机 变量 的 质量 函数 , 由 此 推出 
5 | 守 |- 守 吉 和 办- 


使 上 式 等 于 a 的 t 值 可 以 用 数值 近似 , 然后 用 于 模拟 中 . 
作为 一 个 说 明 , 假设 n= 20,p; = 0.4 且 a= 16. 那么 


RS = 200 006 
令 它 等 于 16, 经 过 一 些 代 数 运算 可 得 
ef =6 
那么, 如 果 我 们 用 参数 . 
0.4er Do 
0.4et +0.6 


生成 伯 努 利 随 机 变 基 , 由 于 
M(t")= (0.4ef +0.6)*? 和 e-*s=(1/6)s 
所 以 重要 抽样 估计 是 了 
909=1{S > 16}(1/6)S320 


由 上 式 推出 
8 < (1/6)16320 = 81/216 = 0.001236 


就 是 说 , 每 次 迭代 中 估计 的 值 都 在 0 和 0.001236 之 间 . 由 于 在 这 种 情形 , 9 是 参 
数 为 (20,0.4) 的 二 项 随机 变 基 至少 是 16 的 概率 , 可 以 用 显 式 计算 得 到 其 结果 9 = 
0.000 317. 因此 , 在 每 次 迭代 中 , 如 果 参 数 为 0.4 的 伯 努 利 随 机 变量 的 和 小 于 16, 自 
然 的 模拟 估计 工 取 值 0, 而 在 其 他 情形 取 1, 它 有 方差 
Var(T) = 6(1 一 9) = 3.169 x 10—4 
另 一 方面 , 从 事实 0 < 6 < 0.001 236 推出 (见习 题 33) 
Var(0) < 2.9131 x 10-7 


例 11.24 考虑 一 条 单 服务 线 排队 系统 , 其 中 相继 到 达 的 顾客 之 间 的 时 间 具 有 密度 
函数 f, 且 服 务 时 间 有 密度 9. 以 D, 记 第 n 个 到 达 者 停留 在 队列 中 等 待 的 时 间 , 并 
且 假 设 我 们 有 兴趣 估计 a = P{Dn > a}, 其 中 a 比 E[Dn] 大 得 多 . 比 之 于 按 f 和 
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9 分 别 生成 相继 的 到 达 间 隔 和 服务 时 间 , 它们 更 应 该 按 倾斜 密度 f-: 和 9 生成 , 其 
中 + 是 一 个 待定 的 正 数 . 注意 利用 这 些 分 布 取代 f 和 9 将 导致 更 小 的 到 达 间 隔 ( 因 
为 -t < 0) 和 更 长 的 服务 时 间 . 因此 , 比 使 用 密度 f 和 9 模拟 将 有 更 大 的 机 会 出 现 
Dn > a. a 的 重要 抽样 估计 是 


他 = I{Dn > a}e'(S"—Y) My(-t) Mo(t)]™ 


其 中 Sn 是 前 n 个 到 达 间 隔 时 间 之 和 , Ya 是 前 个 服务 时 间 之 和 , 且 My 和 Ms 分 
别 是 f 和 9 的 矩 母 函 数 . 使 用 的 t 值 应 该 通过 试验 各 种 不 同 的 选择 来 确定 . 图 


11.7 ”确定 运行 的 次 数 


假设 我 们 要 模拟 生成 具有 均值 上 4 和 方差 o? 的 7 个 独立 同 分 布 的 随机 变 基 

Y(),…,Y(). 我 们 用 
茂 志 YO+ ~ +Y(") 
作为 4 的 估计 . 估计 的 精确 度 可 以 用 它 的 方差 
Var(¥Y7) = E[(Yr — 1)*] = o2/r 

度 基 . 因此 , 我 们 要 选取 必需 的 运行 次 数 7 足够 大 , 以 使 得 2/r 小 得 可 以 接受 . 然 
而 , 困难 在 于 o? 事先 是 未 知 的 . 为 了 得 到 它 , 你 应 该 最 初 模拟 大 次 (其 中 上 > 30)， 
然后 用 模拟 值 Y0),，…,Y( 通过 样本 方差 


友 
DO -Fk 1) 
i=1 
来 估计 o?. 基于 o? 的 这 个 估计 , 达到 要 求 的 精确 性 水 平 的 7 的 值 就 可 以 确定 , 而 且 
可 以 生成 一 个 附加 的 + 一 上 次 运行 


11.8 ”马尔 可 夫 链 的 平稳 分 布 的 生成 


11.8.1 过 去 耦合 法 

考虑 一 个 状态 为 1,…,m 且 转 移 概率 为 Pj; 的 不 可 约 马尔 可 夫 链 , 并 且 假 设 我 
们 要 生成 一 个 随机 变量 的 值 , 这 个 随机 变量 的 分 布 是 这 个 马尔 可 夫 链 的 平稳 分 布 . 
尽管 我 们 能 够 近似 地 生成 这 样 的 随机 变量 , 通过 任意 选取 一 个 初始 状态 , 对 一 个 固 
定 大 的 时 间 周 期 个 数 , 模拟 这 个 马尔 可 夫 链 , 然后 选取 最 后 的 状态 作为 这 个 随机 变 
基 的 值 , 但 是 我 们 现在 将 介绍 一 个 程序 , 它 生 成 一 个 随机 变量 , 其 分 布 精确 地 是 平稳 
分 布 . 
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如 果 , 在 理论 上 , 我 们 生成 的 马尔 可 夫 链 开始 于 在 时 刻 -co 和 任意 状态 , 那么 
在 时 刻 0 的 状态 就 具有 平稳 分 布 . 所 以 , 想象 我 们 这 样 做 , 并 且 假 设 由 不 同 的 人 在 
每 一 个 这 些 时 间 生 成 下 一 个 状态 . 于 是 , 如 果 在 时 刻 -mn 的 状态 是 X(-m) = i, 那么 ， 
人 “-n” 将 生成 一 个 随机 变 基 , 它 以 概率 Pij(ij = 1,…,m) 等 于 j, 且 这 个 生成 值 
就 是 在 时 刻 一 (n 一 1) 的 状态 . 现在 假设 人 “1" 要 提前 生成 他 的 随机 变量 . 因为 他 
不 知道 在 时 刻 一 1 的 状态 是 什么 , 他 就 生成 了 一 系列 随机 变量 N-_1(i),i = 1,…,m,， 
其 中 如 果 X(-1) = 而 N_1(i) 是 下 一 个 状态 , 它 以 概率 Pij(j = 1,…,m) 等 于 j. 
如 果 结 果 是 X(-1) =i, 那么 , 人 “1” 将 报告 在 时 刻 0 的 状态 是 

Si) = NA(), i=L…,m 


( 即 5_1(i) 是 当时 刻 -1 模拟 的 状态 是 i 时 在 时 刻 0 模拟 的 状态 .) 

现在 假设 人 “-2” 听 到 人 “-1” 提前 做 他 的 模拟 , 也 决定 做 同样 的 事情 . 她 生 
成 了 一 系列 随机 变 基 N-_2(i),i = 1,…,m, 其 中 N-2(i) 以 概率 Py(j = 1,…,m) 等 
于 j. 因此 , 如 果 向 她 报告 X(-2) = i, 那么 她 将 报告 XX(-1) = N-2(i). 与 人 “一 1 
提前 生成 的 结合 起 来 表明 , 如 果 X(-2) = i, 则 在 时 刻 0 的 模拟 状态 是 


5-2(i) = 3-1(N-2())， i= bm 
继续 上 面 的 方式 , 假设 人 “-3” 生 成 了 一 系列 随机 变 其 N_3(i),i=1,…,m, 其 


中 N-s(i) 是 在 X(-3) = i 时 下 一 个 状态 将 生成 的 值 . 因此 , 如 果 X(-3) = i, 则 在 
时 刻 0 模拟 的 状态 是 


S$-3(i) = $-2(N-3(i), i=1,…,m 
现在 假设 我 们 继续 上 面 的 做 法 , 从 而 得 到 模拟 的 函数 
5-1(i), S$_2(i), Sa 人， 一 


按时 间 如 此 地 向 后 进行 , 我 们 将 在 某 个 时 刻 , 例如 一 7, 模拟 函数 S--(i) 是 一 个 常数 
函数 . 就 是 说 , 存在 一 个 状态 j, 对 于 一 切 i= 1,…,m, 都 有 5-r(i) =j. 但 是 , 这 就 
意味 着 无 论 从 时 刻 -co 到 一 r 的 模拟 值 是 什么 , 我 们 都 能 够 肯定 在 时 刻 0 的 模拟 值 
是 j. 因而 j 可 以 取 为 随机 变量 的 模拟 值 , 它 的 分 布 恰 是 这 个 马尔 可 夫 链 的 平稳 分 
布 . 

例 11.25 ”考虑 一 个 状态 为 1、2、3 的 马尔 可 夫 链 , 并 且 假设 模拟 产生 了 值 


3， 如 果 i=1 
Ni(i) = 2， 如 果 i=2 


2， 如 果 i=3 


11.8 马尔 可 夫 链 的 平稳 分 布 的 生成 ”585 


1， 如 果 i=1 
N_2(i) = 4 3， 如 果 i=2 
1， 如 果 i=3 
那么 
3， 如 果 i=1 
5_2(i) = 4 2， 如 果 i=2 . 
3， 如 果 i=3 
如 果 
3， 如 果 ;i =1 
NN_s(i) = 4 1， 如 果 i=2 
1， 如 果 i=3 
那么 
3， 如 果 i=1 
5-3(i) = 二 3， 如 果 i=2 
3， 如 果 i=3 
所 以 ,无论 在 时 刻 -3 是 什么 状态 , 在 时 刻 0 的 状态 都 将 是 3. 


注 ”在 这 一 节 中 介绍 的 生成 分 布 为 马尔 可 夫 链 的 平稳 分 布 的 随机 变量 的 程序 , 称 
为 过 去 耦合 法 . 
11.8.2” 另 一 种 方法 


考虑 一 个 以 非 负 整数 为 状态 空间 的 马尔 可 夫 链 . 假设 此 链 有 平稳 概率 , 并 记 为 
Tii > 0. 现在 我 们 介绍 另 一 种 模拟 具有 已 知 分 布 zi (i > 0) 的 随机 变 其 的 方法 , 当 
链 满足 下 面 的 性 质 时 , 这 个 方法 就 可 以 应 用 . 即 对 于 某 个 称 为 0 的 状态 , 存在 一 个 正 
数 a, 使 得 对 于 一 切 状态 i 都 有 


Po>a>0 


也 就 是 , 不 管 当前 的 状态 是 什么 , 下 一 个 状态 是 0 的 概率 至 少 是 某 个 正 值 a. 

为 了 模拟 有 平稳 概率 的 随机 变 基 , 我 们 以 显然 的 方式 从 模拟 马尔 可 夫 链 开始 . 
即 只 要 链 的 状态 在 i, 就 生成 一 个 随机 变量 , 它 等 于 j 的 概率 是 Pj,j > 0, 并 且 将 
随机 变 基 生成 的 值 定义 为 下 一 个 状态 的 值 . 此 外 , 无 论 如 何 , 只 要 转移 到 状态 0, 就 
掷 一 个 硬币 , 其 出 现 正面 的 概率 依赖 于 来 自发 生 转 移 的 状态 . 特别 地 , 如 果 到 状态 0 
的 转移 来 自 状态 i, 则 让 被 搁 的 硬币 以 概率 a/Pio 出 现 正面 . 我 们 将 这 样 的 硬币 称 
为 i 硬币 , i > 0. 如 果 硬币 出 现 正面 , 则 我 们 说 发 生 了 一 个 事件 . 因此 , 马尔 可 夫 链 
的 每 次 转移 以 概率 a 发 生 一 个 事件 , 这 说 明 事件 以 速率 a 发 生 . 现在 , 如 果 某 个 事 
件 来 自 状态 i 的 一 个 转移 , 那么 我 们 称 其 为 i 事件 ; 也 就 是 , 如 果 一 个 事件 出 自 一 个 
宣 币 的 投掷 , 那么 该 事件 是 二 事件 . 因为 x; 是 出 自 状态 i 的 转移 的 比例 , 而 每 个 这 
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样 的 转移 产生 i 事件 的 概率 是 a, 由 此 推出 i 事件 发 生 的 速率 为 ari. 所 以 , 所 有 事 
件 中 事件 的 比例 是 ari/a = i,i > 0. 

现在 假定 Xo = 0. 固定 i, 如 果 第 j 个 发 生 的 事件 是 i 事件, 则 令 厂 等 于 1, 否 
则 令 三 等 于 0. 因为 一 个 事件 总 是 从 状态 0 离开 此 链 , 由 此 推出 厂 (7 > 1) 是 独立 
同 分 布 的 随机 变 基 . 又 因为 石 等 于 1 的 比例 是 zi, 所 以 


其 中 第 二 个 等 号 得 自强 大 数 定律 . 因此 , 如 果 我 们 以 
T= min{n > 0 :在 时 刻 n” 有 一 个 事件 发 生 } 
记 首 个 事件 发 生 的 时 间 , 那么 由 上 式 推出 
而 =P{ 便 =]I=P{X- = 壬 


因为 上 式 对 于 一 切 i 都 正确 , 由 此 推出 马尔 可 夫 链 在 时 刻 7 一 1 的 状态 Xr-1 具有 
平稳 分 布 . 


习 题 
“1. 假设 由 分 布 Fi (i = 1,…,n) 模拟 相对 容易 . 如 果 n 小 , 如 何 由 
P(e)= RRs), P20, DPR=1 
i 5 
模拟 ? 给 出 由 ee 
= 3 下 0<z<1 
F(z)= 
3 一 e-2z 
3 1<z<oo 
模拟 的 一 种 方法 


[9 


.给 出 模拟 负 二 项 随机 变量 的 一 种 方法 . 

“3. 给 出 模拟 超 几何 随机 变量 的 一 种 方法 . 

， 假 设 我 们 要 模拟 随机 地 位 于 以 原点 为 中 心 以 r 为 半径 的 圆 中 的 一 个 点 , 就 是 说 , 我 们 要 模 
拟 具 有 联合 密度 函数 


A 


2 2 


f= ss, + Sr 
的 X,Y. 
(a) 以 R= VX5 十 Y2,0 = tan-1Y/X 记 极 坐标 .计算 R,9 的 联合 密度 , 并且 用 它 给 


出 一 个 模拟 方法 . 另 一 个 模拟 羡 ,Y 的 方法 如 下 . 
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步骤 1: 生成 独立 随机 数 U1,Uz, 并 且 置 Z1 = 2rUi 一 7,22 = 2rU2 一 7. 那么 , 21, 22 
在 边 长 为 2r 且 包 含 半径 为 > 的 圆 的 正方 形 内 均匀 分 布 ( 见 图 11.6). 


-n0 m0 


图 11.6 


步骤 2, 如 果 (21, 22) 落 在 半径 为 7 的 圆 内 ( 即 如 果 2 二 23 < 7?), 则 置 (X,Y) = (21, 22). 


否则 返回 步骤 1. 
(b) 证 明 这 个 方法 可 行 , 并 且 计算 它 需要 的 随机 数 个 数 的 分 布 . 
5。 假设 由 分 布 Fi(i = 1,…,n) 模拟 相对 容易 . 我 们 怎样 从 下 面 的 分 布 模拟 ? 


(a) F(z) = I Fi(z); 
(b) F(z) = 1 Ii(l— F(z)). 
(c) 给 出 由 F(z) = z" (0 < z < 1) 模拟 的 两 种 方法 . 
“6. 在 例 11.5 中 , 对 速率 为 1 的 指数 随机 变量 利 用 汉 . 诺 伊 曼 拒绝 程序 , 我 们 模拟 了 标准 正 态 
随机 变量 的 绝对 值 ， 这 就 提出 了 问题 , 我 们 用 不 同 的 指数 密度 , 即 , 密度 g(z) = Xe-**, 是 
否 能 得 到 一 个 更 有 效 的 算法 . 证 明 拒绝 方案 需要 的 平均 迭代 次 数 在 和 = 1 时 最 小 . 
7. 给 出 模拟 具有 密度 函数 
f(z) =30(z2 一 2z3+z)，0<z<1 
的 随机 变量 的 一 个 算法 . 
8. 考虑 对 9 是 速率 为 和 /n 的 指数 密度 用 拒绝 法 模拟 一 个 F(n, A) 随机 变量 的 技术 . 
(a) 证 明 这 个 算法 生成 一 个 匣 马 随机 变量 需要 的 平均 迭代 次 数 是 nrel-"/(n 一 1)! 
(b) 用 斯 特 林 近 似 证 明 , 对 于 大 的 n, (a) 部 分 的 答案 近似 等 于 e[(n 一 1)/(2r)]/2. 
(0) 证 明 这 个 程序 等 价 于 下 面 的 几 步 . 
步骤 1: 生成 独立 的 速率 为 1 的 指数 随机 变量 Y 和 防 . 
步骤 2: 如 果 下 < (n 一 了 )[Y2 一 In(%%) -- 革 , 则 返回 步 台 1. 
步骤 3: 置 X = ny2/ 入 . 
(d) 解释 从 上 面 的 算法 怎样 得 到 一 个 独立 的 指数 随机 变量 与 一 个 伽 马 随机 变量 . 
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10. 


11. 
12. 


13. 


14. 


15. 


“16. 


建立 从 参数 n = 6,p = 0.4 的 二 项 随机 变量 模拟 的 别名 方法 . 

解释 我 们 怎样 能 在 别名 方法 中 给 QW 做 标号 使 得 上 是 Q( 给 出 权重 两 个 点 之 一 . 
提示 : 除了 把 初始 Q 标记 成 QW 外 , 我 们 还 能 怎样 标记 ? 

完成 例 11.10 的 细节 . 

令 XX，… ,Xk 是 独立 的 , 具有 分 布 


pb = 


如 果 DD 是 X1,.…, Xi 中 不 同 值 的 个 数 证 明 
We a 3 
em- 中 -人 !) | 和 当 所 小 的 时 候 


了 =1mn i=1,..…,k 


n 2n 


离散 拒绝 法 假设 我 们 要 模拟 X, 它 有 概率 质量 函数 P{X = 讨 = Pi,i = 1,…,n, 并 且 
假设 我 们 能 够 容易 地 从 概率 质量 函数 Qi 并, Qi = 1, Qi > 0 模拟 . 令 C 使 得 已 < CQi， 
i = 1,…,n. 证 明 下 面 的 算法 生成 所 要 的 随机 变量 
步骤 1: 生成 具有 质量 函数 Q 的 Y 和 一 个 独立 的 随机 数 U. 
步 又 2: 如 果 U < Py/CQY, 则 令 X = Y. 否则 返回 步骤 1. 
离散 风险 率 法 . 以 X 记 一 个 非 负 整 数值 随机 变量 . 函数 和 (n) = P{X =n|X > n}(n > 0) 
称 为 离散 风险 率 函 数 . 
(a) 证 明 P{X = 对 = An) II (1 一 XD)). 
(b) 证 明 我 们 可 以 通过 生成 随机 数 U1,U2,…, 停止 在 

X=minfn:Uns<An)} 


上 , 以 模拟 入. 

(c) 用 这 个 方法 模拟 几何 随机 变量 . 直观 地 解释 它 为 什么 可 行 . 

(d) 假设 对 于 一 切 n 有 和 A(n) < p < 1， 考虑 模拟 X 的 如 下 算法 ， 并 且 解 释 它 为 什么 可 
行 ， 模拟 Xi, Ui,i > 1, 其 中 Xi 是 均值 为 1/p 的 几何 随机 变量 , 而 凡是 随机 数 ， 置 
Sk = Xi 十 … 十 Xk, 并 且 令 


X = min{Sk : Ur < A(Sk)/p} 


假设 你 刚好 模拟 了 一 个 均值 y 和 方差 o? 的 正 态 随机 变量 X. 给 出 容易 生成 一 个 与 它 有 相 

同 均值 和 方差 且 与 它 负 相关 的 第 二 个 正 态 随机 变量 的 一 个 途径 . 

假设 在 坛 中 有 m 个 重量 分 别 为 wi,… ,wn 的 球 . 这 些 球 依次 地 用 如 下 方式 取出 ， 在 每 次 

选取 时 , 坛 中 一 个 给 定 的 球 以 等 于 它 重量 除 以 仍旧 在 坛 中 的 其 他 球 的 重量 之 和 的 概率 被 选 

中 . 以 卫 , 12,…, In 记 球 取出 的 次 序 一 一 于 是 卫 ,…, In 是 重量 的 随机 排列 . 

(a) 给 出 一 个 模拟 厂 ,……, 1 的 方法 

(b) 令 X 是 速率 为 wsi 的 指数 随机 变量 ，i = 1,…,n.。 解释 X， 能 怎样 用 于 模拟 
L,In. 
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18. 


19. 


次 序 统计 量 . 令 XX1，,… ,Xn 是 出 自 连续 的 分 布 函 数 下 的 独立 同 分 布 随机 变量 , 并 且 以 X(i) 
记 入 ，…，Xn 中 第 i 个 最 小 者 ,i 二 1,…,n. 假设 我 们 要 模拟 XG) < Xo) < … < Xn). 
一 个 方法 是 从 F 模拟 n 个 值 , 然后 将 这 些 值 排序 . 然而, 当 n 大 时 , 这 个 排序 可 能 很 费时 
间 . 
(a) 假设 下 的 风险 率 函 数 和 (t) 是 有 界 的 . 证 明 风险 率 方法 可 以 应 用 于 生成 n 个 随机 变 
量 使 得 没有 必要 排序 . 1 
现在 假设 ~! 容易 计算 
(b) 论证 可 以 生成 X(1),… ,XX(n, 通过 先 模拟 U1) < Ul2) < … < Utn) (mn 个 独立 随机 
数 的 有 序 值 ) 然后 置 Xe = F“!(U(i))， 解 释 为 什么 这 意味 着 XG) 可 以 从 F(B;) 
生成 , 其 中 Bi 是 参数 为 i 和 n 二 i+1 的 贝塔 随机 变量 . 
(c) 论证 通过 模拟 独立 同 分 布 的 指数 随机 变节 Y，,… ,Yn+1, 然后 令 
a= V+.+¥ 
++ 
不 必 排序 就 可 以 生成 UC),… ,Utn)- 
提示 : 给 定 泊 松 过 程 的 第 n 十 1 个 事件 , 对 于 前 n 个 事件 能 说 什么 ? 
(d) 证 明 如 果 Um) = 则 Uty,… Un-y) 与 n 一 1 个 (0,y) 均匀 随机 变量 的 一 个 集合 
的 次 序 统计 量 有 相同 的 联合 分 布 . 
(e) 利用 部 分 (d) 证 明 U(1),… ,Un) 可 以 由 如 下 方式 生成 . 
步骤 1: 生成 0，…, Un. 
步骤 2: 令 


i=l,:n 


Un = 友人， 
Ucn-y =U (Ua) TD, 
Ug- =Un (Un-i+2) /07D,j=n—1,..,2 
令 为 ，…,Xn 是 独立 指数 随机 变量 , 每 个 都 具有 速率 1. 令 


Xi 
= 加 /mn Wi= Wt 
解释 为 什么 Wi,…, Wn 与 每 个 具有 速率 1 的 n 个 指数 随机 变量 的 一 个 样本 的 次 序 统计 
量 有 相同 的 联合 分 布 . 
假设 我 们 要 模拟 n( 一 个 大 的 数 ) 个 速率 为 1 的 独立 指数 随机 变量 ( 记 为 Xi …, Xn). 如 
果 我 们 用 逆 变 换 技术 , 我 们 要 对 生成 的 每 一 个 指数 随机 变量 进行 一 次 对 数 计算 .一 个 避免 
的 方法 是 , 首先 模拟 一 个 参数 为 (n, 1) 的 伽 马 随机 变量 S。( 例 如 , 用 11.3.3 节 的 方法 ). 现 
在 将 Sn 解释 为 速率 为 1 的 泊 松 过 程 的 第 n 个 事件 的 时 间 , 并 且 使 用 给 定 Sn 时 前 nn 一 1 
个 事件 的 时 间 与 n 一 1 个 独立 的 (0, S") 均匀 随机 变量 同 分 布 的 结果 . 基于 此 , 解释 为 什么 
下 面 的 算法 模拟 了 n 个 独立 的 指数 随机 变量 . 
步骤 1: 生成 一 个 参数 为 (n, 1) 的 伽 马 随机 变量 5S，. 
步骤 2: 生成 n 一 1 个 随机 数 Ui,U2,…,Un_1. 
步骤 3: 将 Ui(i 二 1,…,n 一 1) 排序 , 得 到 Uy) < Utz) <… < Utn_y: 


i=2,.,n 
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20. 


21. 


22. 


“23. 


步骤 4, 令 Uko) = 0,Utm =1, 并 且 置 Xi = Sn(Ua 一 Ui-D),i= 1 
当 按 11.5 节 中 描述 的 算法 执行 排序 (步骤 3), 且 所 有 n 个 都 同时 需要 时 ,上面 的 步骤 是 模 
拟 nn 个 指数 随机 变量 的 一 个 有 效 方 法 . 然而, 如 果 内 存 空间 有 限 , 且 指 数 随机 变量 可 以 按 序 
地 使 用 , 一 旦 指数 随机 变量 使 用 后 就 在 内 存 中 被 弃 , 那么 , 上 面 的 方法 可 能 并 不 适合 . 

考虑 从 数 1,…,n 中 随机 选取 一 个 容量 为 上 的 子 集 的 程序 ， 固定 p 并 且 生 成 到 达 间 隔 
分 布 是 均值 为 1/p 的 几何 分 布 的 更 新 过 程 的 前 n 个 单位 时 间 ， 即 P{ 到 达 间隔 时 间 = 
人 } = p(1 一 中 和 大 = 1,2,…. 假设 事件 发 生 在 时 间 ia < 各 < … < im < n. 如 果 
m 三 则 停止 . 各,……,im 是 要 求 的 集合 . 如 果 m > 大 则 从 到 ,im 中 (用 某 种 方法 ) 
随机 地 选取 一 个 容量 为 上 的 子 集 ， 然 后 停止 ， 如 果 m < 大 取 谎 ,… ,im 作为 容量 为 人 
的 子 集 的 一 部 分 , 然后 从 集合 {1,… ,n} 一 {ia，……,im} 中 (用 某 种 方法 ) 选取 一 个 容量 为 
上 一 m 的 随机 子 集 ， 解释 为 什么 这 个 算法 起 作用 . 因为 EIN(n)] = np, p 的 一 个 合理 的 先 
取 是 p 途上 /n. (这 个 方法 由 迪 特 尔 给 出 .) 

考虑 生成 元 素 1,… ,mn 的 一 个 随机 排列 的 如 下 算法 . 在 这 个 算法 中 ,， P(i) 可 以 解释 为 位 置 
的 元 素 . 

步骤 1: 置 上 =1. 

步骤 2: 置 P(1) = 1. 

步骤 3: 如 果 上 = mw 则 停止. 否则 令 天 一 大 十 1 

步骤 4, 生成 一 个 随机 数 U, 并 且 令 


P(IkUJ+1), PO(kU]+1)=k. 


返回 步 对 3. 
(a) 用 语言 解释 这 个 算法 在 做 什么 ? 
(b) 证 明 在 第 上 次 适 代 时 ( 即 , 当 P(k) 的 值 被 初始 设置 时 )P(D), P(2),… P(A) 是 1,…, 
的 一 个 随机 排列 
提示 用 归纳 法 , 并 且 论证 
Pe{iasia, ,1 ki, ,ik2, i} 

三 及 -iii ,i 

二 站 。 由 归纳 假设 
上 面 的 算法 可 以 让 用 于 即使 在 开 初 不 知道 n 的 时 候 . 
验证 如 果 我 们 利用 风险 率 方法 模拟 一 个 非 时 齐 泊 松 过 程 的 事件 时 间 , 它 的 强度 函数 是 Mb)， 
使 得 Mt) < 和 ,那么 ,我们 可 以 应 用 11.5 节 的 方法 1 中 给 出 的 方法 
对 于 一 个 强度 本 数 为 (4) (t > 0) 的 非 时 齐 泊 松 过 各 ,其 中 和 (Ddt==oo, 以 Xi, Xa，… 
记事 件 发 生 的 时 间 序列 


xX 
(a) 证 明 | (6)dt 是 速率 为 1 的 指数 随机 变革 


24. 


25. 


27. 


28. 


习题 591 


Xs 
(b) 证 明 | A(t)dt (i > 1) 是 独立 的 速率 为 1 的 指数 随机 变量 , 其 中 Xo = 0. 


简 言 之 , 独立 于 过 去 ， 直 到 一 个 事件 发 生 为 止 必 须 经 历 的 附加 风险 县 是 速率 为 1 的 
指数 随机 变量 . 
给 出 模拟 具有 强度 函数 i 4 
MO Ltra 20 
的 非 时 齐 泊 松 过 程 的 有 效 方 法 
令 (X,Y) 在 中 心 为 原点 半径 为 r 的 圆 内 均匀 分 布 .就 是 说 , 它们 的 联合 密度 是 


时 


pe 0gr+y sr 


f(z,y) = 
以 尺 = VX7+Y3 与 9 = arcta nY/X 记 它 们 的 极 坐标 . 证 明 RR 与 9 独立 ,9 是 (0,2r) 
均匀 随机 变量 , 且 P{R<a}=a?/r?,0<a<r. 


以 尽 记 在 二 维 平面 中 的 一 个 区 域 . 证 明 对 于 二 维 泊 松 过 程 , 给 定 在 R 中 存在 n 个 点 时 , 这 
些 点 在 RR 中 是 独立 的 并 且 在 RR 中 均匀 分 布 , 即 它们 的 密度 是 f(z,y) = c, (Z,y) e R, 其 中 
c 是 区 域 尺 的 面积 的 倒数 


令 XX,… ,Xn 是 独立 随机 变量 , 具有 E[Xi] = 0, Var(Xi) = 0?,i = 1,…,n, 考虑 9 形 如 
学 ?1 和 Xi 的 估计 , 其 中 忆 全 和 = 1. 证 明 当 


wa/ (19). i=ln 
j=1 


时 , Var (导入 Xi) 最 小 . 
可 能 的 提示 , 如 果 你 对 于 一 般 的 n 不 会 做 , 先 尝试 n = 2 的 情形 . 


下 面 的 两 个 问题 涉及 [ g(z)dz = Elg(U)] 的 估计 , 其 中 UV 是 (0,1) 均匀 随机 变量 . 
o 


随机 投 点 法 . 假设 g 在 [0,1] 上 有 界 (例如 , 假设 对 于 0< z 和 1 有 0<g(z) < b). 令 
,U2 是 独立 随机 数 , 并 且 令 X = Ui,Y = bU2( 使 得 点 (X,Y) 在 长 度 1 和 高 度 5 的 矩形 
中 均匀 分 布 ). 现在 令 
广 1， 若 Y < og(X) 
0， 其 他 
即 如 果 点 落 在 图 11.7 的 阴影 部 分 , 则 接受 (X,Y). 
四 证明 El= | gz)dz. 
和 


(b) 证 明 Var(bT) > Var(g(U)), 所 以 随机 投 点 法 比 简单 计算 一 个 随机 数 的 9 有 更 大 的 
方差. 
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29. 


30. 


31. 


“32. 


0b 1b 


00 1.0 
图 11.7 


分 层 抽样 ， 令 [ii …，,Un 是 独立 随机 数 , 且 令 i = (Ui + 一 1)/n,i 二 bn 因此 
本 (i = 1,…,n) 在 ((i 一 1)/n,i/n) 上 均匀 分 布 . 并 "9( 避 )/n 称 为 | g(z)dz 的 分 层 
抽样 估计 | 

(a) 证 明理 全 5 四 川 =| slo. 


(b) 证 明 Var 全 7 < Var (3 stv)/n). 
提示 ， 令 U 是 (0, 1) 均匀 随机 变量 , 并 且 定义 N 为 ,如 果 (i 一 1)/n<U<i/m 则 N= 
i = 1…,n. 现在 用 条 件 方差 公式 得 到 
Var(g(U)) =ElVar(g(U)IN)] + Var(E[g(U)IN]) 
> E[lVar(g(U)IN)] 
-7 VUIN = 


: 四 
-7 YaeC) 


n 


1 


如 果 f 是 均值 4 和 方差 o? 的 正 态 随机 变量 的 密度 函数 , 证 明 倾斜 密度 九 是 均值 六 十 2t 
和 方差 o? 的 正 态 随机 变量 的 密度 函数 

考虑 一 个 排队 系统 , 其 中 每 个 服务 时 间 独 立 于 过 去 ， 有 均值 人， 以 W。 和 Dn 分 别 记 顾 客 
在 系统 中 和 在 队列 中 停留 的 时 间 . 因此 ，Dhn = Wn 一 Sn, 其 中 Sn 是 顾客 n 的 服务 时 间 . 


所 以 
E[D] = ElWn] -六 


如 果 我 们 用 模拟 来 估计 E[Dn], 我 们 应 该 
(a) 用 模拟 数据 确定 D，, 然后 用 它 作为 E[Dn] 的 一 个 估计 ; 还 是 
(b) 用 模拟 数据 确定 Wa, 然后 用 这 个 量 减 去 作为 ELD,] 的 一 个 估计 ? 
如 果 我 们 要 估计 E[W], 重复 相应 的 问题 
证 明 如 果 X 和 Y 有 相同 的 分 布 , 那么 
Var((X +Y)/2) < Var(X) 
因此 得 出 结论 用 对 偶 变量 绝 不 会 增加 方差 (虽然 不 一 定 像 生成 一 个 独立 的 随机 数 集合 一 样 
有 效 ). 
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33. 如 果 0< XX < a, 证明 
(a) E[X?] < aE[X]; 
(b) Var(X) < E[X](a — E[X]); 
(c) Var(X) < a?/4. 
34. 假设 在 例 11.19 中 , 在 时 间 to 以 后 不 允许 进入 新 的 顾客 . 给 出 to 以 后 直至 系统 空闲 为 止 的 
期 望 附加 时 间 一 个 有 效 的 模拟 估计 . 
35， 假设 我 们 能 够 模拟 独立 随机 变量 X 与 Y. 如 果 我 们 模拟 了 2k 个 独立 随机 变量 Xi …， 
Xk 与，…，Yk, 其 中 Xi 与 X 同 分 布 , Y 与 了 同 分 布 , 那么 如 何 用 它们 估计 P{X < Y}? 
36. 如 果 中 、U2、Us 是 独立 的 均匀 (0, 1) 随机 变量 , 求 P (IT Ui > 0.1). 
提示 , 把 所 要 求 的 概率 与 泊 松 过 程 的 一 个 概率 联系 起 来 . 
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第 1 章 
2. 5 = {(7,g), (7,5), (9,7), (9g,5), (b,7), (b,g)}(7,g,b 分 别 表示 红 , 绿 , 蓝 ), 其 中 , 例如 (7,g) 意 
指 第 一 次 取 到 的 弹 球 是 红 的 , 且 第 二 次 是 绿 的 . 每 个 这 样 的 基本 结果 的 概率 是 1/6. 
5，3/4. 如 果 他 赢 , 他 只 赢 1 美元 ; 如 果 他 输 , 他 输 3 美元 
9. 下 = 已 UPFB", 由 于 已 和 下 Be 不 交 , 引出 P(F)=P(E)+P(FE*). 
17. P{ 结 束 }= 1 一 P{ 继 续 }= 1 - [P(H,H,H) + P(T,T,T)] 


均匀 硬币 ，P{ 结 束 }= 1 一 BB A 


et 
| 

> 二 wx 二 和 28| = 
4 4 4 2 


和 有 信 醒 币 ，P{ 结 素 }= 1 - [3 


19. 已 = 事件 “至少 一 个 是 6" 
P(E) = 得 到 已 的 方式 数 /样本 点 的 个 数 = 贡 . 


DD = 事件 “两 个 面 不 同 " 
P(D) = 1 一 P( 两 个 面相 同 )= 1 一 


25，(a) P{ 成 对 }=P{ 第 二 张 站 克 怕 与 第 一 张 同名 }= 去 
(b) P{ 成 对 | 不 同 兹 色 } 一 a 
__ _P{ 成 对 } 
P{ 不 同 花 色 } 
_3/51 _1 


1 “39/51 13 
27. P(EBi)=1, P(E2lEi)= 如 
由 于 有 12 张 牌 在 有 黑 桃 A 的 那 一 堆 中 , 而 有 39 张 牌 不 在 有 黑 桃 A 的 那 一 堆 中 . 
PE 已 有) = 中 
由 于 有 24 张 牌 在 有 两 个 A 的 那些 堆 中 , 而 有 26 张 牌 不 在 有 两 个 A 的 那些 堆 中 . 


13 
P(Es|E1E2E:) = 三 
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P{ 每 - 瞧 中 有 -张力 = (六) (各) (号 ) 


P{ 是 乔治 , 不 是 比尔 } 
P{ 恰 有 一 次 击 中 } 
P{ 乔 治 ,不 是 比尔 } 
一 P{ 乔 治 , 不 是 比尔 } + P{ 比 尔 , 不 是 乔治 } 
本 (0.4)(0.3) 二 六 
~ (0.4)(0.3) +(0.7)(0.6) 9 
_ P{ 乔 治 , 击 中 _ Pf 乔治 _ 04  _20 

们 ?人 拆 痢 击 和 P{ 击 中 | “PI{ 击 中 } ”7 一 C03)(06) 五 
32. 令 ,= 事件 “第 i 人选 到 自己 的 帽子 


了 (没有 人 选 到 自己 的 帽子 ) 
=1—P(EiU EU...U En) 


=1= PE- DD P(E Eis) + :+ (-1)"+!P(BE Ea...E) 


30.(a) P{ 乔 治 | 恰 有 一 次 击 中 } = 


1 PPE)+ PEBs)- D5 PEs EsBs)+... 
be <is <iz<is 


+(—1)"P(E E2... En) 
邻 ke {1l,2,..,n}. 


P(Eu Ei Ei,) = 上 个 特定 的 人 选 到 自己 的 帽子 的 方式 数目 _ (n 一 站)! 


可 以 排列 帽子 的 方式 总 数 而 
在 求 和 号 并， cu < <i， 中 的 项 数 = n 个 变量 中 选取 大 个 变量 的 方式 数目 = ( - 


nl 于 是 


RAT 

加 -hb fam-bl 1 
,En Ee Bs) ee = 里 = 六 
P( 没 有 人 远 到 自己 的 帽子) =1 一 二 二 二 一 出 


二 
A 


主 六 二 
oh 
40.(a) FF = 事件 “ 抛 据 的 是 均匀 硬币 ”; U = 事件 “抛掷 的 是 两 面 都 是 正面 的 硬币 ” 
1 2 1 
P(HIF)P(F) 2”3 4-1 
?PCD BHIF)P(F) + P(NPO TI IT- 了 -了 
区 4 
P(HHIF)P(F) ix3 3 
_ _-_ 4x5 8_1 
(b) P(EFIHH) = FTPCRJ+ECAIDJEUJ Tl Ss 
- 2 8 
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P(HHTIF)P(F) 
P(AHHTIF)P(F) + P(HHTIO)P(U) 
__P(HHTIF)P(F) 
P(HHTIF)P(F)+0 
由 于 均匀 硬币 是 唯一 可 能 出 现 反面 的 . 
43. 将 英 洛 有 蓝 眼 睛 基因 这 一 事件 记 为 B. 因 约 和 乔 两 人 都 有 一 个 蓝 眼 睛 基因 , 记 X 为 他 们 的 
女儿 的 蓝 眼 睛 基因 数 , 就 得 出 
1/2 


P(B)=P(X=1X <2) = 3 =2/3 


(oj P(FIHHT)= 


=1 


因此 , 对 美 洛 的 女儿 是 蓝 眼 睛 这 一 事件 C, 我 们 有 
P(C) = P(CB) = P(B)P(CIB) = 1/3 


45. 令 Bi = 事件 “第 i 次 是 黑 球 "Ri = 事件 “第 i 次 是 红 球 ” 
, P(RalBi)P(By) 
(BlR2) = (RGIB)P(B!) + P(RoI RI PUR) 
r b 
bi+riec bir 
EE 
brriec brrtotrte btr 
古人 
一 到 +(r 二 or 5 二 7 十 
48. 令 C 是 事件 “随机 地 选取 一 个 有 车 的 家 庭 ", 且 令 太 是 事件 “随机 地 选取 一 个 有 房子 的 家 
庭 ". 


P(CHe) =P(C)—P(CH)=0.6—0.2=0.4 


和 
P(CeH) = P(E) - P(CH) = 0.3 一 0.2 = 0.1 
给 出 结果 
P(CHe)+P(CeH) = 0.5 
第 2 章 


4. (1) 1, 2, 3,4,5,6. (i) 1,2,3,4,5,6. (ii) 2, 3，…,11 12. (iv) —5,4,..,4,5. 


4 1 ” 3 
1 (2)\i) (2) = 
16. 1— (0.95)5? 152(0.95)5!(0.05). 


18. (a) P(X = zi=1 7 一 1|Xr =j) 


nl 1 
_ Berir! 
1 一 Pr)o 


-未 
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(b) 在 给 定 X, 二 j 时 ,关于 (X14,…， Xr-1) 的 条 件 分 布 参数 是 nj 了 ,i 二 1… ,71 


(c) 上 面 陈述 的 正确 性 在 于 , 因为 给 定 zr = j, 在 不 出 现 结果 r 的 n 一 j 个 结果 中 , 出 现 结 


果 i 的 概率 是 了 
23. 为 了 X 等 于 n, 前 n 一 1 次 抽 掷 中 必须 有 r 一 1 次 正面 而 且 第 n 次 落下 的 必须 是 正 


面 . 利用 独立 性 , 所 求 的 概率 是 1 
于 一 1 1 er- nr 
( ) (1 一 六” "xp 


‘i= rl. 


r-l 


27. P{ 正 面 的 数目 相同 } = 》，P{4A =i,B = 让 


另 一 种 推理 如 下 ， 
了 P{#(4 正面 ) = ##(B 正面 )} 
三 P{#(4 反面 ) = ##( 已 正面 )} 
=P 伏 一 ##(4 正面 ) = #(B 正面 )} 
二 P{ 正 面 总 数 = 全 
38. c=2, P{X>2}= 三 2e-2zdz =e 
2 
47. 如 果 试 验 i 成 功 , 令 X; 为 1, 否则 令 Xi 为 0. 
(a) 最 大 值 是 0.6. 如 果 Xi = X2 = Xa, 那么 
1.8= E[X] = 3E[X1] = 3P{Xi = 1} 
所 以 P{X = 3} = P{X1 = 1} = 0.6. 这 是 最 大 值 可 以 由 马尔 可 夫 不 等 式 得 出 
P{X > 3} < E[X]/3=0.6 
(b) 最 小 值 是 0. 对 此 构造 一 个 P{X = 3} = 0 的 概率 场景 , 令 U 是 (0, 1) 上 的 均匀 随机 变 


量 , 并 且 定 义 
1， 若 U<06 
X1= 
0， 其 他 
和 二】 1 若 避 >04 
0， 其 他 


1， 若 U<0.3 或 U>0.7 
Xs= 
0， 其 他 


容易 看 出 
PX = N= N=1}=0 
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48. 如 果 X 是 非 负 随机 变量 , 9 是 可 微 函 数 且 g(0) = 0, 那么 


Elg(X)] = 三 P(X > bg'(6dt 


令 了 是 X 的 概率 密度 函数 . 证 明 这 个 结果 的 一 个 方法 是 用 分 部 积分 法 (dv = g'(t)dt,u = 
P(X > 如) 得 到 


[Pe > oer= -rosg| + (O(a = Elocx)] 
另 一 个 方法 是 令 (0) 是 事件 X > + 的 示 性 函数 那么 
s00=] roa= rr 
现在 在 等 式 两 边 取 期 望 就 得 到 结果 


49. E[X?] - (E[X])? = Var(X) = E[(X  E[X])?] > 0, 等 号 成 立 当 Var(X) = 0, 即 X 是 常 


数 . 


64， 对 于 匹配 问题 , 令 X = Xi 十 … 十 XN, 其 中 


65. 


| 1， 若 第 人选 到 自己 的 由 子 
“一人 o， 其 他 情形 
我 们 得 到 
Var(X) = Eve) +2D Deon) 
i<j 
由 于 P{Xi = 1} = 1/N, 我 们 有 2 


1 1 N-1 
ve = 方 (- 方 ) = 全 


同时 
Cov(Xi, Xi) = E[XiX;] 一 ELX]E[X5] 
现 
xx _ 人 1， 着 第 人 和 第 了 人 都 选 到 自己 的 由 子 
“人 0， 其 他 情形 
人 EIXiXj] =P{OG =1,X; =1} 
=P{X=1}P{X =1|X:=1}= i 
因此 
1 1 1 
Ow) = | = WN 1) 
且 1 
ES 1 
| ) 
- 
= 下 + 方 = 


(a) ( : ) (1 一 p2)?, 其 中 pz =e ?22/21 一 2e 


(b) e—445/6! 
[OR 


66. 


71. 


72. 


73. 


74. 


80. 


85. 
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将 事件 Xi e Ai(i = 1,……mn) 记 为 Bi, 我 们 有 


P(B,…B) = P(Bi) T[P(B;1B, Bi) = P(B) TI P(B;) 
2 2 
参见 第 5 章 5.2.3 节 . 另 一 种 方法 是 用 甜 母 函数 . n 个 参数 为 和 的 独立 指数 随机 变量 和 的 和 矩 
母 函数 等 于 它们 的 和 矩 母 函数 的 乘积 , 也 就 是 [和 /( 和 一 t)]". 而 这 正 是 参数 为 n 和 和 的 伽 马 
随机 变量 的 矩 母 函 数 . 
令 Xi(i > 1) 是 均值 100 和 方差 100 的 独立 正 态 随机 变量 . 
(a) 因为 P(Xi < 115) = P(Z < 1.5) = 0.9332, 其 中 2 为 标准 正 态 变量 , 所 求 的 概率 
是 1 一 (0.9332)5 = 0.2923. 


(b) 因为 5 = Xi + … 十 Xs 是 均值 500 和 方差 500 的 独立 正 态 随机 变量 . 


30 
P(S 0) = P(Z > 一 一 ) ~ 0.0901 
(S > 530) (2 > 0) 0. 


(a) P(Siy) = 1/365 
(b) 和 (c) 是 
(d) 否 


(e) 成 功 次 数 近似 地 是 均值 为 人 提 m 的 泊 松 分 布 . 因此 


P(4) = P(0 个 成 功 ) ~e-""-D/730 
(0 -23x22/740 ~ 0.5 
Ele-**]= De "eM /nl=e *D (Ne)"/nl=es 0) 


令 Xi 表示 均值 为 1 的 泊 松 随机 变量 那么 
{Ex < = 
党 


但 是 对 很 大 的 nm 》 ”Xi 一 n 近似 地 有 均值 为 0 的 正 态 分 布 , 所 以 结论 成 立 . 
(a) 利用 Var(W/ow) = 1, 结合 和 的 方差 公式 , 得 出 
CoCo >o 
COxoy 
(b) 由 Var(X/cx 一 Y/oY) > 0, 再 如 (a) 部 分 一 样 进行 . 
(c) 两 边 平方 导致 这 个 不 等 式 等 价 于 


Var(X +Y) < Var(X) + Var(Y) +2oxoy 


2+2 


或 用 和 的 方差 公式 得 到 
Cov(X,Y) < axoy 


这 正 是 (b) 部 分 . 


600 附录 带 星 号 习题 的 解 


86. 将 处 理 第 i 本 书 需 要 的 时 间 记 为 Xi. 对 标准 正 态 变量 Z 有 


?总 > ~? (2> 多) 


2 
(b)P 全 海 去 zu) ~P (z < = 窜 ) =P(Z > 2/3) 
87. (a) P( 2 < x) =P(<Vi<Z< Va) 
= Fz(V7)— Fz(—V7z) 
求 微 商 , 得 出 


和 2 加 = 和 Tv+jzCva= 高 re 


(b) nn 个 参数 为 (1/2,1/2) 的 独立 伽 马 随机 变量 的 和 是 参数 为 (n/2,1/2) 的 仰 马 随机 变量 . 
第 3 章 


2. 直观 地 第 一 次 正面 似乎 等 可 能 地 发 生 在 试验 1,… ,n 一 1 中 的 任意 一 次 . 就 是 说 , 直观 地 
P{X =ilX1 + Xa = 村 = 十， 
P{Xa = Xi+Xa =n} 
P{UXi + Xa =n} 
_P{X! = 让 Xa =n 一 让 
P{Xi + Xa =n} 
Pp pp" 


E sy. )) P(1 一 ”2 


和 


i=l1,.",n—1 


正式 地 ， 
P{X1 =ilX1+X2 = 村 = 


“R=1 
在 上 面 例 数 第 二 个 等 式 给 分 子 赋值 时 利用 了 Xt 和 X 的 独立 性 , 给 分 母 赋值 时 Xi 十 X 
有 负 二 项 分 布 . BT 
6. px/Y(1|3) = 一 IE 


-P3240) 风 
范 ( 吝 ) ( 训 


| 
_8 
pxlr(ola) = 艺 
2 
Pxly(23) 一 了 
1 
pxlY(3|3) 一 好 
EIXIY =1]= 3 
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13. 给 定 X > 1 时 X 的 条 件 密度 是 
fxlx>1(X)= FE = es 当 z>1 
SA EIXIX > 1]=e 三 ze-*dz =1+1/X 
最 后 的 结果 也 立刻 由 指数 随机 变量 缺乏 记忆 的 性 质 得 到 . 
19. [pr =wpv ewev = | srelmarfrnay 


-向 von 


=|=| enaraz 


=|=zxodz 
=E[X] 


23. 以 X 记 正 面 首次 出 现 的 时 间 . 我 们 通过 取 条 件 于 X 后 的 两 次 抛掷 得 到 E[N|X] 的 一 个 方 


程 . 它 给 出 


EIN|X] = EIN|X, h, hjp? + EIN|X, h, tjpq + E[IN|X, t, hjpg + EIN|X, t,t]g? 


其 中 gq = 1 一 p. 现在 
E[IN|X,h,h] =X+1, EIN|X,h,t]=X+1 
EINIX,t,h] =X+2, E[IN|X,t,t]=X+2+EI[N] 
代 回 去 给 出 
EIN|IX] = (X + 1)(p? +pq) + (X+2)pg+ (X+2+E[IN])g” 
取 期 望 , 并 且 用 X 是 均值 为 1/p 的 几何 随机 变量 的 事实 , 我 们 得 到 
EN] =1+p+9+2pg+9q2/p 十 202 十 92EIN] 


解 出 ELN] 得 
EIN] = 2+2tg/p 


4 取 条 件 于 任意 一 个 工人 是 否 胜任 , 然后 用 对 称 性 . 就 推出 
PGD) = PHI 有 人 胜任 )P( 有 人 胜任 ) = 一 (1 一 p)"] 
42. (a) 
Ele5e]= | 


区 去 LL exp{—(z2 — 2pz + pe — 2t27)/2}dr 
E 


= 疡 呈 "2 exp{-(e°0 — 20) -2p5)/2}dz 
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和 和 
因此 令 oz = 得 


Pi | I 2 
Be = 大 e"| pt -2pe)/207 a 
用 
i | 
我 人 有 
txX2] - e-u2/2+n2o2/2 _ 1 三 ti 
Ele:*"]=e or 


or-oana2/2_1_ [> 212 2 
=e€ 装 exp{—y /20°}dy 
-om 


= ae-(L-o2)n2/2 


二 全 20-aem 人 人 Q ey i) 2 
= 2- 性 
(b) 
E [= b> z] 3 I Ele'*?] = (1 — 2t)-"/? oo 人 六 4 
i el 各 


加 d /2 /2-1 
-2 " =n( 2) 


Sa —2t)-"/? = 2n(n/2+1)(1— 2t)-"/2-? 
因此 , 如 果 x% 是 自由 度 为 n 的 卡 方 随机 变量 , 那么 计算 上 式 在 t = 0 的 值 可 得 
Ex2]=n, Var(x2) =m2 十 2n 一 n2 = 2n 
(d) 取 条 件 于 天 可 得 
Ele:*]= Ele'™ |K = kje™°/?(0/2)*/k! 


ft 
= =/ /0/a)* /A 

k=0 
=(1—2t)-"/2e-0/2 (1 — 2t)*(0/2)*/k! 


k=0 


n/a.-0/3 0 /A 
1 = (1 — 2t)-"/2e-0/2 Se Fp JN 
JS 二 ( 瑟 2) 


二 : 俱 二 20-"zexp{ 人 -5 十 元 5} 


=(1—2t)-"/?exp 全 竹 0 } 
因为 上 式 是 参数 为 n 和 9 的 非 中 心 卡 方 随机 变量 的 矩 母 函数 , 而 答 母 函数 唯一 地 确定 


了 分 布 , 结果 得 证 . 
(e) 从 前 述 可 得 
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43. 


47. 


53. 


54. 


EIWIK =A] = E+2x] =n+2k 
Var(WIK =k) = Var(x242k) = 2n 十 多 
EIW] = E[E[WIK]] = Eln +2K] =n+2EIK] =n+0 
由 条 件 方差 公式 得 
Var(W) = El2n + 4K] + Var(n+2K)=2n+20+20=2n+40 
对 T= TI{Ye4} 有 


EIX1] = E[XIIT = lJP{I =1} +E[IXIIT = 0]P{I =0} =E[XIT =1]P{I=1} 


E[X2Y2|X] = X?E[Y?|X] 
> X*(E[Y|X])? = X? 


不 等 式 成 立 是 由 于 对 于 任意 随机 变量 U, EIU?] > (E[U])?, 而 且 当 取 条 件 于 某 个 其 他 随机 


变量 X 时 仍然 正确 . 取 期 望 于 上 式 表明 
EI(XY)’] > ELX3] 


因为 
EIXY] = EIEIXYIX]] = EIXE[Y|X)] = ELX] 
就 得 到 结果 . a 
训 光 训 讲 | P{X =nlA}e—*dX 
0 
sk er-xd》 
。 


本 “2nd 
而 


-eg 0) 
可 \2 


因为 由 erttndt = Fn 十 1) = 吕 , 所 以 就 得 到 所 需 结 果 . 


(a) B= 及 , 这 因为 , 若 在 首次 成 功 后 立刻 跟着 大 一 1 次 连续 的 成 功 , 则 X = 上 


(b) 若 n<k 则 Pn=0 


kk 
Pe = Dp (1 —Pp)Pein +p 


i=1 


大 
P= pr 一 PP -inbm>k 
pt 
(©) Pe =p (1 —p)Pe +p* 
(d) PB = .62 = .36 
已 = .4P + .24Ps = Ps, = .144 
Ps = .4Ps + .24Ps + .144Ps = Ps = .144 
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Ps = .4Ps + .24Ps + .144Ps = Ps = .64(.144) 
Pr = .4Pr + .24Ps + .144Ps = Pr = .4(.144) 
Ps = .4Ps + .24Py + .144Ps = Ps = (1.96)(.144)(.16) = 0.0451584 


55。 取 条 件 于 在 一 列 试验 中 首次 有 上 一 1 次 成 功 的 结果 , 就 得 出 


58. 


60. 


Mx = Mk-1+p(1) + (1—p)M 
因此 , Mi =1+ BM 令 a = 1/p, 推 得 
Mk =1+a(l+ oaM:_2) 
=1+a+azMk- 
=1+a+oaz+asMk -as 


大 一 1 
= Do 
4 
(a) r/ 入 . 
(b) EIVar(NIY) + Var(EINIY])] = EIY] + Var(Y) = 让 + 起: 
(人 用 p= 并 可 推出 


P(N = = P(N =nly =Wfy(Way 


-| 
nC) 
和 区 i 
-mm QtrDyyntr-lqy 
x 
nr DIOQ+ Dr 
NX (nt+r—l)! 


(za 一 站" 

7 一 1 

(d) 当 每 次 试验 独立 地 以 概率 P 成 功 时 , 在 第 7 次 成 功 前 的 失败 次 数 和 X 一 同 分 布 , 其 
中 X 等 于 直至 第 7 次 成 功 的 试验 次 数 , 是 负 二 项 随机 变量 . 因此 


BX r=)=P(X=n+7)= (1)ra-m 


dy 


[ee 


hl 


(a) 直观 地 f(p) 对 p 递增 , 因为 p 越 大 , 第 一 个 玩 越 有 利 . 
(b) 1. 
(ce) 1/2, 由 于 第 一 个 玩 的 优势 变 成 为 0. 
(d) 取 条 件 于 首次 抛掷 的 结果 ， 
f(p) = 了 P{ 第 一 个 玩家 赢 | 正面 jp + P{ 第 一 个 玩家 赢 | 反面 }(1 一 p) 
=7+[1— f(p)](1 —7) 
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所 以 
f= 75 
67. 证 明 部 分 (a) 只 要 注意 到 在 前 n 次 六 据 中 ， 一 个 了 次 连续 正面 的 连贯 可 以 出 现在 两 种 相互 


排斥 的 途经 . 或 者 在 前 n 一 1 次 抛掷 中 存在 j 次 连续 正面 的 连贯 ; 或 者 在 前 n 一 j 一 1 次 抛 


据 中 没有 j 次 连续 正面 的 连贯, 第 n 一 j 次 不 是 正面 , 并 且 从 n 一 j 十 1 次 到 第 n 次 都 是 正 
面 . 


令 4 是 在 前 n(n > j) 次 抛 挪 中 发 生 一 个 j 次 连续 正面 连贯 的 事件 . 取 条 件 于 首次 出 现 非 
正面 时 的 试验 次 数 得 出 
Pi(n) = P(AIX = 及 P (1 —p) 


3 
= P(AIX =k)p" (1—p)+ 垃 P(AIX = k)p*™ (1 一 由 


k=1 k=j+1 


= A 1(1 一 可 十 党 Ze (1 一 中 


= k=j+1 


= Pi(n— Ap (1 一 可 十 到 


1 


73， 取 条 件 于 超过 100 之 前 的 和 的 值 .在 所 有 的 情形 最 可 能 的 值 是 101，( 例 如 , 如 果 和 的 值 是 


98. 那么 最 后 的 和 可 能 是 101、102、103 或 104. 如 果 超 过 100 之 前 的 和 的 值 是 95, 那么 
最 后 的 和 肯定 是 101.) 


93，(a) 由 对 称 性 , 对 于 (T,…,Tm) 的 任意 值 , 随机 向 量 ( 厂 ,……, Im) 等 可 能 地 是 ml 个 排 
列 中 的 任意 一 个 . 


(b) EIN] = ;六 EINIX =iP{X = 计 
i=1 


1 了 
= 
1 


m1 
= 元 (Fem +E[N])+ str) 
气 


其 中 最 后 的 等 式 用 了 X 与 T 的 独立 性 . 所 以 
ww 
EIN] = ElITm-1] + > EIT:] 
et 
(9 EN = 7 


(qd) MM SD 
i=l j=1 


606 ”附录 带 星 号 习题 的 解 


97. 


98. 


99. 


村 Wi m 
m+1-j i m+1—j 
mn mmm) 
m+1-j pr 
-全 ( m mn) 
re 中 = 中 l= 
=m(m—1) 


令 是 参数 为 p 的 几何 随机 变量 . 为 了 计算 Var(X), 我 们 用 条 件 方差 公式 , 取 条 件 于 第 一 
次 试验 的 结果 . 如 果 第 一 次 试验 是 成 功 , 令 了 = 1, 否则 令 了 工 = 0. 如 果 工 = 1 那么 X=1. 


因为 常量 的 方差 是 0, 所 以 
Var(XII =1)=0 


另 一 方面 , 如 果 工 = 0, 那么 在 工 = 0 下 X 的 条 件 分 布 与 参数 为 p 的 几何 随机 变量 
(为 了 获得 成 功 需 增加 的 试验 次 数 ) 加 1( 第 一 次 试验 ) 的 无 条 件 分 布 相同 . 因此 由 


Var(X|I = 0) = Var(X) 
可 得 
ElVar(X|1)] = Var(XIT= DP{I =1}+ Var(XIT = 0)P{I =0} = (1—p)Var(X) 


类 似 地 ， i 
EXl1=1=1, EXI/=0=1+EX]=1+5 


上 式 可 以 写成 i 
EXIN=1+5(-D) 


从 而 
Var 加 = 声 Var(D)= 疡 p0 -及 = 2 
由 条 件 方差 公式 可 得 
Var(X) = ElVar(XID] + VarBEXID = (1 —p)Var(X) + 1=2 


因此 
Var(X) = 与 


EINS] = E[EINSIN]] = EINE[SIN]] = EIN2E[X]] = ELX]P[N?]. 因此 
Cov(N,5) = ELIXJE[IN?] - (EIN])2EIX] = E[X]Var(N) 


(a) p*. 

(b) 要 使 N = 十 7, 模式 不 能 在 前 7 一 1 次 试验 中 发 生 , 第 7 次 试验 必须 是 失败 , 且 第 
7 十 二 … "十 次 试验 必须 都 是 成 功 . 本 

(Od) 1-P{N=k}=D P{N=k+7r}= DP{N >"— 1}gp* = ElN]Jgp" 


r=1 r=1 
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4 
Pun=5, Pa=5, Pa= 


4. 令 状态 空间 是 s = {0, 1,2,0,1, 3}, 其 中 状态 i(i) 标志 现在 的 值 是 i, 旭 当天 是 侦 ( 奇 ) 数 . 
9. Pl = 0.5078 
16. 如 果 Pi; 是 (严格 地 ) 正 的 , 那么 对 于 一 切 n, Pi 将 是 0 (否则 , i 和 j 将 互通 ). 但 是 , 从 i 
开始 的 过 程 有 一 个 至 少 是 Pi; 的 正 概率 绝 不 返回 i. 这 与 i 的 常 返 性 矛盾 . 因此 Pi; = 0. 


21. 转移 概率 是 ee 
A 
m-{ . 


oa 若 了 尖 i 
由 对 称 性 
Py=30 -Pn), ji#i 
所 以 , 我 们 用 归纳 法 证 明 
$+ 40 40)", 若 j=i 
SY 1 
4 一 4(1 一 40)"， 着 j 关 i 


因为 上 式 对 于 n = 1 正确 , 假定 它 对 n 成 立 . 为 了 完成 归纳 法 证 明 , 我 们 需要 证 明 


1 3 本 
要 吉 于 whi aly 
i 为 若 j#i 
现在 
Pet = PnP + D PrPs 
I#i 
各 | 
= (+30-40)") 04-30 +3 (4-30-40)")e 
=+ (40)"( -3 -a) 


301 40)"+! 
+ 4(1 -40) 


FS 


由 对 称 性 , 对 于 了 天 
es We 
Pt = 30— Pat)= 4 430-4) 


这 就 完成 了 归纳 法 
在 上 式 中 , 令 n 一 oo, 或 者 用 这 个 转移 概率 是 双 随机 的 , 或 者 只 用 对 称 性 推理 , 我 们 得 到 


m= 于 1i=1,2,3,4. 
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27. (a) 因为 每 一 个 个 体 在 下 一 时 段 的 状态 只 依赖 于 他 当前 的 状态 ， 而 不 依赖 于 更 早 时 的 状 
态 , 所 以 这 是 一 个 马尔 可 夫 链 . 

(b) 如 果 入 个 个 体 中 有 i 个 目前 是 积极 的 ， 那 么 在 下 一 时 段 积极 的 个 体 数 是 两 个 独立 

随机 变量 Ri 与 Bi 之 和 , 其 中 R: 是 目前 积极 的 i 个 个 体 中 在 下 一 时 段 依然 积极 的 

个 体 数 ，Bi 是 目前 消极 的 N 一 i 个 个 体 中 在 下 一 时 段 变 积极 的 个 体 数 。 因为 Rs; 

是 以 (i,a) 为 参数 的 二 项 随机 变量 ，Bi; 是 以 (N 一 i,1 一 B) 为 参数 的 二 项 随机 变量 , 所 


以 有 
EXn|Xn_i = 引 =ia+(N-ad-D)=NGI-D)+(ae+B 一 1 
因此 , 由 
ELXns|Xn -ij= NG-B)+(e+B-1DXn- 
可 得 


ElXn] = N(1—B)+(a+B— EXn-!] 
令 ae= NG-B),5=a+B-1 由 上 式 可 得 
E[Xn] = a+bE[Xn_i] 
a+b(a+ bE[Xn-2]) 
a+ba+ bE[Xn-2] 
=a+bat bat bE[Xn-3] 


继续 这 样 就 得 到 
E[Xn] =a(l+6b+.*+6"-!)+b"ELXo] 
因此 
E[Xn|Xo =i] =a(l+b++b")+b"i 
注意 到 ， 
lim EIXn] = Te = Ni 


(0) R 和 Bi 如 前 述 定 义 , 那么 
Pij=P(Ri+ B:=j) 


= DP(R+ Bi=jlR = 人 aa am 
1 Ni Po a 因 
-EC kGN- (ea -oo 大 


其 中 若 r< 0 或 >> m, 则 的 =0. 
(d) 假设 N = 1. 用 1 代表 积极 , 用 0 代表 消极 , 极限 概率 满足 


ro= 50B + (1— a) 
ml 一 To(1 一 B) 十 mla 


To 十 TI 一 1 
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32. 


38. 


39. 


40. 


41. 


47. 


求解 可 得 


现在 考虑 N 个 总 体 的 情形 . 因为 在 稳定 状态 每 个 个 体 将 以 概率 ml 为 积极 又 因为 
每 一 个 个 体 的 状态 改变 与 其 他 成 员 是 独立 的 ， 所 以 稳定 状态 下 积极 的 个 体 数 有 参 
数 为 (N,ma) 的 二 项 分 布 . 因此 恰 有 7 个 个 体积 极 的 长 程 时 间 比 例 是 


Wh Wt 
nm 人) 人) (二 入) 


NE -a) 


注意 到 稳定 状态 下 积极 的 期 望 个 体 数 是 了 ,与 (b) 中 一 致 . 
es 3 奖 态 马尔 可 夫 键 ” 和 比例 的 方程 组 是 


To 一 了 16™+ 3m+ 调 站 2， TIl 一 Brot Sm + Bra, m+m+7An2=1 
这 给 出 解 
(a) 0.4p + 0.6p?. 
(b) P21 + 2P82 = 0.32 + 1.36 = 1.68. 
(Omp + ap? = (1/3)p + (2/3)p? 
(a) 得 自 对 称 性 , 因为 在 任意 状态 有 无 穷 多 个 比 它 小 的 状态 , 也 有 无 穷 多 个 比 它 大 的 状态 , 且 
在 每 一 步 等 可 能 地 向 更 大 的 相 邻 状态 , 或 向 更 小 的 相 邻 状 态 走 一 步 . 
(b) imi = 并 ,mi. 若 ri = 0, 它 是 0, 若 ri > 0, 它 是 co. 
(ce) 因为 学 ;mi = 1 无 解 , 我 们 可 以 得 到 结论 ri = ma = 0, 因此 这 个 链 是 零 常 返 的 . 
这 个 链 是 双 随机 的 ， 所 以 等 = 1/12, 因此 1/m = 


二 他 P( i 直接 进入 D))= ,a 


i=0 i=0 


es= ls 

e2 =1/3+1/3(1/3) = 4/9 

es =1/3+1/3(1/3) + 4/9(1/3) = 16/27 

ea = 1/3(1/3) + 4/9(1/3) + 16/27(1/3) = 37/81 

es = 4/9(1/3) + 16/27(1/3) + 37/81(1/3) = 158/243 


{Yn,n > 1} 是 以 (i,j) 为 状态 的 马尔 可 夫 链 . 


五 /0 着 7z#k 
ak 一 Pr， 着 7 天 
1 


其 中 万: 是 {Xn} 的 转移 概率 . 


lm P{Y% = (17)} = lim, P{Xn = Xun =j} = ,lim,[P{Xn =i}P] = miPy 
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60，(a) 在 给 定 初始 状态 i(i = 1, 2) 时 , 状态 3 在 状态 4 之 前 进入 的 概率 记 为 Pi. 然后 , 取 条 件 
得 出 


P=0.4P, +0.3P +0.2 
P; = 0.2 忆 + 0.2P; + 0.2 

由 此 推出 Pi = 11/21. 

(b) 将 在 状态 i 开始 直至 进入 状态 3 或 状态 4 时 的 平均 转移 次 数 记 为 mi. 那么 

ma =1+0.4mi+0.3m2 
ma = 1+ 0.2m1 + 0.2m2 

由 它 可 得 m1 = 55/21. 

62. 容易 验证 平稳 概率 是 ri 一 元 因此 返回 到 初始 状态 的 平均 时 间 是 n 十 1. 


68. (a) DimiQy = TinPi = 7 DP = 
(b) 无 论 是 跟踪 时 间 向 前 方向 的 状态 序列 , 还 是 跟踪 时 间 向 后 方向 , 状态 是 i 的 时 间 比 例 是 


一 样 的 . 
第 5 章 
5. P{Y =n}=P{n—1<X<n}=e*") -en"=(e*)"!(1—e’*) 
更 P{ < Xz| min(X1, X2) = t} 


_ P{X1 < Xa, min(X1, Xz) =} 
加 P{min(X1, X2) = t} 
s P{X1 =t,X2 >t} 
~ P{X1 =t,X2 >t}+P{X2 =t,X1>t} 
GS f(D — F(t)] 
A — Fl)] + fo(ON — F(t)] 
分 子 分 母 同时 除 以 [1 一 (tj)][1 一 F(t)] 就 得 到 结果 (当然 , fi 和 玉 是 Xi 的 密度 和 分 
布 函 数 , i = 1, 2). 为 了 使 上 面 的 推导 严格 , 应 该 在 各 处 用 < (t,t 十 ) 代替 “= 坟 , 然后 , 令 
E 一 0. 
8. 速率 入 + 人 的 指数 随机 变量 
10. (a) EIMXIM 24 = EIM?IM = X] = EI[M?] = 


cb 
QA+p)? 
(b) 由 指数 随机 变量 的 无 记忆 性 , 给 定 M = Y, X 与 M + X' 一 样 地 分 布 , 其 中 X' 是 
独立 于 M 的 速率 为 和 的 指数 随机 变量 . 所 以 
ELMXIM =Y] =EIM(M + X")] = ELM?] + EIMIEIX'] 
dm 和 
~ Q+m? MM+p) 


2 和 十 几 


六 
(CO EIMX] = EIMXIM = XI + EIMXIM 一 四 人 一 OA 
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所 以 


站 
人 


(b) 令 下 是 首 个 离开 的 时 刻 , 记 为 FF 二 了 十 4, 其 中 了 是 首 个 到 达 的 时 刻 , 而 4 是 从 它 直 
至 首 个 离开 的 时 刻 的 附加 时 间 . 先 取 期 望 , 然后 取 条 件 于 首 个 到 达 者 , 我 们 得 到 


1 起 % 
ne 


现在 利用 了 
ee ni 
[Alal 灰 + 允 十 灰 二 台 克 十 友 
和 
和》a 1 


E[4 册 = 一 一 一 
[4 而 二 各 + 及 十 天 加 十 遍 


18. (a) 1/(24). 
(b) 1/(4x2), 由 于 一 个 指数 随机 变量 的 方差 是 其 均值 的 平方 . 
(G) 和 (d)， 由 指数 随机 变量 的 无 记忆 性 质 推出 ，X(z) 超出 Xo) 的 量 A 是 速率 为 的 

指数 随机 变量 ， 而且 独立 于 Xt 所 以 
BlXo] =EEXo + 有 = 起 + 

va(xo) =varxo+= 三 + 志 = 认 

19. 利用 独立 于 得 胜 人 的 得 胜 时 刻 是 速率 为 + = 和 。 + Xe 的 指数 随机 变量 ,， 它 给 出 等 于 选手 A 
赢得 的 总 量 X 有 

Bl= 二 % 


hr 
M+tNrtia 


Rf eweat =R 
23. (a) 1/2. 


i 
(b) 9 . 只 要 电池 1 在 使 用 , 而 失效 发 生 且 不 是 电池 1 失效 的 概率 是 3. 


(0) Gl 人 


(d) T 是 n 一 1 个 独立 的 速率 为 2 的 指数 随机 变量 (由 于 每 次 一 个 失效 发 生 直到 下 一 
次 失效 发 生 的 时 间 是 速率 为 2 的 指数 随机 变量 ) 之 和 
(e) 参数 n 一 1 和 2k 的 伽 马 分 布 . 
34. (La HB HB Ha 


a 
入 入 
de 
( ) Eat 
35. 这 是 显然 的 . 例如 


P{Ns(t+h)— Ns(t)=1}=P{N(s+t+h)— N(s+t)=1}= M+o(h) 
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N(t) n 
36. EI[S()IN(t) =n] = -| II XilNG) = | = 号 [ 立 XilN(t) = | 


i=l 1 


=sE 下 -| = s(E[X])” = s(1/p)" 


1 


于 是 
E[S()] =s DW)"e (Ab"/ml 
一 se Dt/ /nl = se— Mt+Mt/p 
由 同样 的 理由 
E[S®(DIN(Gt) = 7] = s*(ELX])" = s*(2/p2)" 
从 而 


EI[S?(t)] i 82e 一 Mt+2AtHA2 
40. 最 容易 的 方法 是 用 定义 5.3. 容易 看 到 {N(t),t > 0} 具有 平稳 的 独立 增 是 .由 于 两 个 独立 
的 泊 松 随机 变量 的 和 也 是 泊 松 随机 变量 , 由 此 推出 N(t) 是 均值 为 (Ai + 和 2)t 的 泊 松 随机 
变量 . 
57. (a) e-?， (b) 下 午 2 点 . (c) 1 一 5e-. 
58. (a) 它 和 N(t) + 1 有 相同 的 分 布 , 其 中 {N(t),t > 0} 是 速率 为 的 泊 松 过 程 . 因此 它 和 1 
加 上 一 个 均值 为 Xt 的 泊 松 随机 变量 有 相同 的 分 布 . 
(b) EIpw] = 并 mopn+ie-Xt(At)n/ml 二 PENG 下 
(t+ 
(d) pe-xMG-P(t 十 已 
60. (a) 到 (b) 5 
64. (a) 由 于 给 定 N(t), 由 每 个 到 达 者 在 (0,t) 均匀 分 布 推出 


EXIN(GO] = NG he -9 里 = NG 


(b) 令 ,U2,… 是 独立 的 (0,t) 均匀 随机 变量 . 那么 
1 


Var(X|IN(t) =n) = Var [Ee = 四 | =n Var(Ui) = "5 


1 
(c) 由 (a) 和 (b) 与 条 件 方差 公式 
2 | | i 


Var(X) = ver ( 2 De 


69. 均值 为 | F(ay+ w]e F(y)dy 的 泊 松 随机 变量 
; 


to 
to 
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79. 这 是 强度 函数 为 p(t)(t),t > 0 的 非 时 齐 泊 松 过 程 . 
84. 如 果 首 个 大 于 t 的 X 取 值 在 t 和 t+ dt 之 间 , 那么 就 有 一 个 记录 , 其 值 在 上 和 t+ dt 之 间 . 


91. 


98. 


由 此 我 们 看 到 , 独立 于 所 有 小 于 t 的 记录 值 , 以 概率 A(t)dt 有 一 个 记录 值 在 上 和 t+ 十 dt 之 
间 , 其 中 A(t) 是 由 


__fG) 
MW = TF 


给 出 的 失败 率 函 数 . 由 上 面 知 , 记录 值 的 计数 过 程 有 独立 增 量 性 ， 我 们 可 以 得 出 结论 (由 于 
不 能 有 多 重 记录 值 ,因为 Xi 都 是 连续 的 ), 它 是 一 个 强度 函数 为 和 (t) 的 非 时 齐 泊 松 过 程 
当 /是 指数 密度 时 ， 有 A(t) = 入, 所 以 记录 值 的 计数 过 程 是 速率 为 和 的 通常 的 泊 松 过 程 . 
作为 开始 , 注意 


nn 
人 > 立 x =P{X1 > X2}P{X1 — Xa > XalX1 > X2} 
xP{X1 — X2 — Xs > XslX1 > X2 + Xa}... 
XxP{Xi — X2 一 … 一 Xn-l > Xn|X1 > X2 + + Xn-1} 
nl 
= 人 由 忽 乏 记忆 性 质 


因此 ， 


?m2 -可 - Er{* > 允 %} -过 = 
i 1 Ee 
(a) 我 们 有 
Dlt+h) = D(t) + D(t,t+h) 
其 中 D(t,t+ hh) 是 发 生 在 t 和 tt 十 h 之 间 的 理赔 折 现 值 . 取 期 望 , 然后 取 条 件 于 在 t 
和 tt 十 hh 之 间 的 理赔 次 数 X 得 到 


M(t+h) = M(t) + E[D(t,t+ A)|X = 1]Ah + o(h) 
= M(t) + pe “Mh +o(h) 


Mt 月- M(t) _ 哆 


(b) 
(9) 由 直接 可 可 分 得 到 


He-“tA+ 一 一 , 然后 令 h 趋 于 0. 


99. P(X >tIMi =Y) = ep{- [eo 和 ve"")ds) =exp {-x a 2 oo)} 


因此 , 
PC >0= | ept-x-&a-e OHMGO)dy 
其 中 /是 标志 值 的 密度 函数 . 
第 6 章 


2. 


令 Na 人 是 在 状态 4 的 有 机 体 个 数 , 且 Ne (t) 是 在 状态 B 的 有 机 体 个 数 . 那么 {NAa(t), Ne 人 tb 
是 连续 时 间 的 马尔 可 夫 链 , 具有 
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Vnm} = am 十 DBm 


am 

Ptnmj,fn-lm+1 = i 
Bm 

Ptnmj,tn+2.m-1 = pr 


4. 以 N(t) 记 在 时 间 上 车 站 中 的 顾客 数 . 那么 {N(t)} 是 具有 
Mn=Man, pn=p 


的 生 灭 过 程 . 
7，(a) 是 ! 
(b) 对 于 n= (mmt ng-1), 令 
Si(n) = (na —Lmnt+l ne), i=1,.…,k—2 
Sk-1(n) = (nniyni+ ,Nk — 1), 
So(n) = (ni 十 1 naynai+i nk-1). 
那么 


qn,si(n) = Tai i=1,..,k-1 


qn,so(n) 一 入 


11.(b) 按 提示 利用 缺乏 记忆 性 和 j 一 (i 一 1) 个 速率 为 和 的 指数 随机 变量 的 最 小 值 s, 是 速 
率 为 (7 一 (i 一 1)) 的 指数 随机 变量 这 一 事实 , 
(ce) 由 (al 和 (b) 知 


Pt +tD sd=P {ge < = -ey 
1gigj 


(d) 以 一 切 概率 取 条 件 于 X(0) = 1 
Pi(t) =P{X(t) = 人 四 
=P{X(t) 27}—P{X(t) >j+1} 
=P{T1+.…+D <} -PN+.+ Dn gt 


(e) 每 个 有 参数 p = e-* 的 i 个 独立 几何 随机 变量 的 和 ， 是 一 个 参数 为 (i,p) 的 负 二 项 
随机 变量 ， 这 是 由 于 从 初始 总 体 i 开始 等 价 于 有 i 个 独立 的 尤 尔 过 程 ， 每 个 过 程 都 
从 单个 个 体 开 始 . 
16. 令 状 态 是 
2: 接触 到 一 个 可 接受 的 分 子 
0: 没有 接触 到 分 子 
1: 接触 到 一 个 不 可 接受 的 分 子 
那么 这 是 一 个 生 灭 过 程 , 具有 平衡 方程 组 
请 己 = 和 AL 一 a)P 
12Pz = MaPo 
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由 于 学? Pi = 1 所 以 


kp2 1 一 ah Po Mp 
Xa a pk 和 aha + pp2 + A(l — a)p2 


其 中 忆 是 这 个 位 置 被 一 个 可 接受 的 分 子 占 据 的 时 间 百 分 比 . 这 个 位 置 被 一 个 不 可 接受 的 
分 子 占据 的 时 间 百 分 比 是 
om 和 A(L — oa)p2 
a 各 Mapn + pip2 + A(1 — a)p2 
19. 有 4 个 状态 . 令 状态 0 记 没 有 机 器 失效 , 状态 1 是 机 器 1 失效 , 而 机 器 2 在 运行 , 状态 2 是 
机 器 1 在 运行 , 而 机 器 2 失效 , 而 状态 3 是 两 个 机 器 都 失效 . 平衡 方程 如 下 

(A++ 和》a)P =P + paP 

(m+XM)P =AP 

(Nt)B = MP +nP 

nmP=MP+AP 
P+P+P+P=1 


1 


这 些 方程 很 容易 求解 ,而 机 器 2 的 失效 时 间 比 例 是 及 + 已 
24,， 我 们 令 状态 为 在 等 竺 的 出 租 汽车 的 数量 那么 我 们 得 到 一 个 A。= 1, Jn = 2 的 生 灭 过 程 
这 是 M/M/1. 所 以 
人) 等 竺 的 出 租 泊 车 的 平均 数 = 二 一 一 1 
(b) 到 达 的 顾客 措 到 出 租 汽 车 的 比例 ， 是 到 达 的 顾客 至 少 找到 一 辆 在 等 待 的 出 和 改革 
的 比例 . 这 样 的 顾客 的 到 达 率 是 2(1 Ph) 所 以 这 种 到 达 者 的 比例 是 
oI) a a (Al 
a 
28. 以 P35, vf 记 X(0) 的 参数 ,而 有 ,tf 记过 程 Y(t) 的 参数 ; 而 且 令 极限 分 布 分 别 是 PY, PY. 
由 独立 性 我 们 有 {X(t),Y(t)} 是 马尔 可 大 链 其 参数 


VD 一 巡 十 讽 
有 0G.0 = 加 
Plinth) = Fa 
+. Jim, P{X(O,Y()) = (7) = PFPY 
因此 , 我 们 需要 证 明 


PPP PS = PI PPPS 


( 即 从 (i,l) 到 (j,1) 的 速率 等 于 从 (j,1) 到 (i,1) 的 速率 ). 但 这 是 由 于 在 X(t) 中 从 i 到 j 
的 速率 等 于 从 7 到 i 的 速率 , 即 


616 附录 带 星 号 习题 的 解 


Peeps = Pr 


在 看 (i,l) 和 (i, 上) 时 , 其 分 析 是 类 似 的 . 


33. 首先 假设 等 待 厅 有 无 限 容量 . 以 Xi(t) 记 在 服务 线 i (i = 1,2) 的 顾客 数 . 由 于 这 个 M/M/1 


37. 


的 每 个 过 程 {Xi(t)} 是 时 间 可 逆 的 , 因此 由 习题 28 推出 , 向 量 过 程 {(X1(t), X2(t)), t > 0} 
是 时 间 可 逆 的 马尔 可 夫 链 我 们 感 兴趣 的 过 程 正 是 这 个 向 量 过 程 在 状态 集合 4 上 的 截断 ， 
其 中 


A={(0,m):m<4}U{n0) :ng du{nm):nm>0nt+msg} 


因此 , 服务 线 1 有 人 上 且 服务 线 2 有 rm 人 的 概率 是 
(人 的 人- 区 
-的 ome 


Drm=1 
确定 , 其 中 的 和 求 遍 4 中 的 (n,m). 
(a) 对 一 切 i = 1,…,k, 若 在 医院 中 有 mi 个 i 型 病人 , 则 状态 是 (ni,… ,nx). 
(b) 这 是 一 个 M/M/oo 型 生 灭 过 程 , 因而 是 时 间 可 逆 的 . 
(c) 因为 对 一 切 i = 1,…, 大 , {Ni(t),t > 0} 是 独立 的 过 程 , 向 量 过 程 是 时 间 可 逆 的 连续 时 
间 的 马尔 可 夫 链 
(d) P(e, ng) = 下 eX/ (Ni /pa)™ /ml 
(e) 作为 时 间 可 间 的 连续 时 间 的 马尔 可 夫 链 的 截断 过 程 有 平稳 概率 


常数 C 由 


和 
Pa na = K Ie OA/ /mt (nn) € A 
El 
其 中 A= {(m,…,nx) : 并 natn < C}, 而 KK 满足 方程 


k 
G x 2 I oO/)™/ml=1 


(nni)eAil 
(0) 令 ri 等 于 i 型 病人 准 入 的 速率 ， 


n= 于 和 XiP(na nk) 


(mlnit le nk) EA 


大 
(@) Dri/ DN 
i 1 
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38，(a) 状态 是 闲 着 的 服务 线 的 集合 . 
(b) 和 (c) 对 ie 5,j #5 链 的 无 穷 小 速率 是 
qs,s-i= MIS|, qs,s+i = 1 
其 中 |8| 是 5 中 元 素 的 个 数 . 时 间 可 道 性 方程 是 
P(S)MIS| = P(S — i) 
它 有 解 
P(S) = FolSl! I (x/X) 


keS 


其 中 Po 是 没有 服务 线 闲 着 的 概率 , 由 
Pl+y IsSITIIwx/A=1 


KES 
求 得 , 其 中 前 一 个 和 是 求 遍 {1,…,n} 的 一 切 非 空子 集 . 
39，(a) 若 { 记 ,…, 认 } 是 空闲 的 服务 线 的 集合 , 且 羡 的 空闲 时 间 最 长 , ?2 的 空闲 时 间 其 次 , 如 
此 等 等 , 则 状态 是 (加 ，… ,ik). 
(b) 和 (c) 对 了 有 {i，…,ik} 链 的 无 穷 小 速率 是 
6 Ag 


时 间 可 逆 性 方程 是 


Pi ,让 ) 入 := P(e ,ii) Hin 
解 得 


Pi 总 


其 中 P(0) 是 没有 空闲 服务 线 的 概率 . 
40. 时 间 可 道 性 方程 是 


Min P(0) 


Vi 


PO =PO) LT 
推出 解 
PO) = 到 


因此 , 这 个 链 是 时 间 可 逆 的 , 且 具 有 上 面 给 出 的 长 程 比例 . 

42. 因为 M/M/1 的 平稳 的 离开 过 程 是 泊 松 过 程 , 由 此 可 推出 服务 线 2 的 顾客 数 是 M/M/1 系 
统 的 平稳 概率 . 

43. 我 们 猜测 除了 泊 松 到 达 者 以 速率 入 来 到 服务 线 3, 然后 去 服务 线 2, 再 后 去 服务 线 1, 最 后 
离开 系统 外 , 倒 北 链 是 相同 类 型 的 系统 . 令 ex 为 在 位 置 上 是 1, 而 在 其 他 位 置 是 0 的 三 元 
素 向 量 . 在 服务 线 j(j = 1,2,3) 有 顾客 记 为 状态 i = (ia,iz,ia), 这 个 链 的 瞬时 转移 速 
率 为 
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jk) (it1jk) = 入 
EA) LtLk) = 1 i>0 
EFA HLk+D) = 2, J > 0 


QA),k-D) 三 Ha 大 >0 
而 我 们 猜测 倒 逆 链 的 瞬时 速率 为 


Qk) kt 一 入 
giants+uk-D = ks, k> 0 
Qt) 一 Ha 了 >0 


Gk) ilk) = pi>0 


如 在 上 式 是 倒 北 链 的 眠 时 速率 时 ,我们 能 求 得 满足 逆向 时 间 方 程 的 概率 P(i, j,k), 则 我 们 
的 猜测 是 正确 的 , 而 易 验证 


A 
PG7z9=K (二 ) (二 ) ( 读 ) 
是 成 立 的 . 
49，(a) 矩阵 P* 可 以 写成 
P*=I+R/v 
所 以 Pi" 可 取 和 矩阵 (I 十 R/v)” 的 (i,j) 元素 , 在 v = n/t 时 它 给 出 了 结果 . 

(b) 均匀 化 显示 了 Pi(t) = E[P5*], 其 中 N 是 一 个 独立 于 转移 概率 为 P; 的 马尔 可 夫 链 
的 均值 为 vt 的 泊 松 随机 变量 . 因为 均值 为 vt 的 泊 松 随机 变量 的 标准 差 是 Vut, 由 此 
推出 对 于 很 大 的 值 vt, 此 随机 变量 必定 在 vt 附近 . (例如 , 因为 均值 为 105 的 泊 松 随机 
变量 的 标准 差 是 10?, 所 以 随机 变量 以 高 概率 在 10 的 正 负 3000 附近 . ) 因此 , 对 固 
定 的 i,j, 当 vt 很 大 时 , 对 m 的 值 在 vt 附近 时 ， Piy” 的 变化 不 应 很 大 , 由 此 推出 对 很 


大 的 vt 有 
EIPIN] = Po", 其 中 n=vt 
第 7 章 
1 
3. (a) P{N(t) =n|S, =Y)} = { a WR 


外 PINGO =n} = | PLUG = nds, =y)fs, (Way 


t 
= | eM-WAe (AMy)-D/m 1)ldy 
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6. (a) 考虑 一 个 速率 为 的 泊 松 过 程 , 并 且 只 要 这 个 泊 松 过 程 的 编号 7,27, 37,… 中 的 一 
个 事件 发 生 , 就 说 更 新 过 程 的 一 个 事件 发 生 . 于 是 


P{N(t) > n} = P{ 直 到 t 为 止 有 nr 个 或 更 多 的 事件 } 
二 2 et(M) /i 


(b) EIN(t)] = 区 P{N(t) > 可 = 二 3 eM 


oo [i/r] 


= ON 记 = ] eX (Xt) /i 


8. (a) 直到 t 为 止 被 替换 的 机 器 的 台数 构成 更 新 过 程 . 如 果 新 机 器 的 寿命 > 了 ， 则 替换 之 
间 的 时 间 等 于 T; 如 果 新 机 器 的 寿命 是 z，z < T, 则 替换 之 间 的 时 间 等 于 z, 因此 ， 


T 
| 换 之 间 的 时 间 | = | zf(z)dz+7l1 一 F(T) 


从 而 结果 得 自命 题 3.1. 


(b) 直至 t 为 止 已 经 失效 的 机 器 台数 构成 更 新 过 程 . 在 使 用 和 失效 之 间 的 平均 时 间 E[] 
可 以 通过 取 条 件 于 初始 机 器 的 寿命 计算 ， 因 为 E[F] = E[E[F| 初 始 机 器 的 寿命 ]， 现 


在 
着 z<T 

E[F| 初 始 机 器 的 寿命 是 z] = 过 T+EIF]， 着 sz> 工 

因此 
ElF] = | zf(z)dr + (T+ EIF)I1 — F(T)] 
也 就 是 
[ zf(z)dr + TI — F(T)] 
EIF] = FJ 

从 而 结果 得 自命 题 3.1. 


13. 设 你 在 第 i 局 赢得 Wi,i > 1, 而 N 是 进行 的 局 数 . 于 是 由 瓦尔 德 方程 推 得 
E[X] = EINJEIW] =0 


又 有 pi=P{X = 计 ,Pm = 1/2+1/8 = 5/8, p-: = 1/4,p-s = 1/8, 验证 了 E[X]=0. 

18. 我 们 可 以 想象 一 个 更 新 对 应 于 一 个 机 器 失效 , 且 每 次 一 个 新 的 机 器 放 上 使 用 , 它 的 寿命 分 布 
以 概率 p 是 速率 为 ia 的 指数 分 布 , 以 概率 1 一 p 是 速率 为 1 的 指数 分 布 . 因此 , 如 果 我 
们 的 状态 是 当前 使 用 的 机 器 的 指数 寿命 分 布 的 指标 , 那么 这 是 一 个 两 个 状态 的 连续 时 间 的 
马尔 可 夫 链 , 具有 强度 速率 


q2=pj(1—p), gq21= pap 
因此 
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hh(l-p) A Hap 
Pa = en bt a Ht 


对 其 他 的 转移 概率 也 有 类 似 的 表达 式 (Pi2(#) = 1 一 P(t), 而 Pz(t) 类 似 , 只 不 过 12p 和 
M(1 一 p) 互 易 位 置 ). 现在 取 条 件 于 初始 机 器 , 得 到 
E[Y(t)] = pE[Y(t)|X(0) = 1] + (1 —p)E[Y (HIX(0) = 2] 
六 [i pe [2 本 | 


Hi bz pH2 
最 后 , 我 们 可 以 从 
plm(t) + 1] = t+ ElY(t)] 
得 到 m(t), 其 中 
p=p/p+(1—p)/k2 
是 平均 到 达 间 隔 时 间 . 
22. (a) 以 X 记 J 持 有 一 辆 车 的 时 间 长 度 . 若 直至 时 刻 发 生 故 障 , 则 记 了 为 1, 否则 了 为 0. 
于 是 有 


E[X] = ELIXIT = 1 一 ex7)+EIXIT= Ole 7 
训 (r+ t) (1—e-*7)+ (r+ }) ex7 
亲 入 
-er er 


a 


1/E[X] 是 ] 购买 新 车 的 速率 . 
(b) 令 W 是 购买 一 辆 新 车 包含 的 全 部 费用 . 那么 , 对 等 于 首次 故障 的 时 刻 Y 有 


Elw] = EIWly = 切 MXe-xydy 
T ~ 
= c+| r(1+AT 一 切 +DXe dy +| rhe ydy 
0 z, 江 
T 
=C+r(r2 一 e 7) 十 | MT -ye dy 
o 
J 的 长 程 平均 费用 是 E[W]/E[X]. 
23. (a) 在 A 每 次 赢得 1 点 时 , 称 为 开始 一 个 循环 . 以 N 记 在 一 个 循环 中 的 点 数 ， 
1 
E[N] = 1+ ge/ps 
其 中 在 前 面 用 了 , 从 B 开始 发 球 直至 A 赢得 一 个 点 时 , B 的 点 数 是 参数 为 Ps 的 几何 


随机 变量 . 因此 , 利用 更 新 酬 报 , A 赢得 点 数 的 比例 为 1/E[N] = 寺中 和 


Pat+pe 
四 3 


pe Pa 十 本 
C， ee A 
(ec) Fr 2 等 价 于 Page > Po 
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30. 


A _t— Sn _ |_ Svw 1 Sw N(t) 
t t NG 上 

结果 得 自 , 由 于 Sw(o/AN(b 一 A( 由 强大 数 定律 ) 和 N(t)/t 一 1/ 人. 
35，(a) 我 们 可 以 将 它 看 成 一 个 M/G/ce 系统 ， 其 中 卫星 发 射 对 应 于 到 达 ， 而 FF 是 服务 分 

布 . 因此 

P{X(t) =k} =e-\) A):/k! 
4 

其 中 A(t) = a — F(s))ds. 

(b) 将 这 个 系统 看 成 交替 更 新 过 程 ， 它 处 在 开 ， 如 果 至 少 有 一 个 卫星 在 轨道 上 ， 我 们 得 


到 
limP{X(t) =0} = 5 二 证 


其 中 在 一 个 循环 中 开 的 时 间 人 正 是 有 兴趣 的 量 . 从 部 分 (a) 得 到 
limP{X(t) = 0} =e 六 
其 中 = | (1 一 FF(s))ds 是 一 个 卫星 在 轨道 上 的 平均 时 间 , 因此 


ex = VA 
1/X+ EIT] 
所 以 
1 一 e 
B= Se 


42. (a) Fe(z) = :| er-wWndy =1— es/. 
人 Jo 


es i w= E, 0gz<e 
(c) 如 果 从 你 停车 开始 , 停车 管理 员 在 一 小 时 内 出 现 , 你 将 收 到 一 张 罚单 . 由 例 7.27, 直到 停 
车 管理 员 出 现 的 时 间 具 有 分 布 Fe, 由 部 分 (b), 它 是 (0,2) 上 的 均匀 分 布 ， 于 是 , 这 个 
概率 是 1/2. 
44，(a) 以 NV; 记 上 第 i 辆 公交 车 的 乘客 数 . 若 将 X; 解释 成 在 时 刻 i 引起 的 报酬 , 就 有 一 个 更 新 
报酬 过 程 , 它 的 第 i 个 循环 的 长度 为 Ni, 报酬 为 Xi ，_ +， hi 十 .十 XNi HA 
因此 (a) 部 分 得 自 , N 是 首 个 循环 的 时 刻 , 而 Xi 十 … 十 Xw 是 首 个 循环 的 价格 . 
(b) 取 条 件 于 N(t), 且 利 用 在 取 条 件 于 N(t) = n 时 , n 个 到 达 间 隔 时 间 在 (0,t) 上 独立 均 
匀 分 布 . 5 三 Xi 十 … 十 XN 作为 这 n 个 顾客 中 等 待 时 间 小 于 z 的 人 数 , 就 有 
若 z<t 
车 z>t 


这 就 是 , E[S|T = 也 NGb] = N(t) min(z,t)/t. 取 期 望 得 到 ELSI7 = 4] = 和 min(z,). 
(c) 由 (b) 知 E[SIT] = 入 min(z, 了 T), 取 期 望 得 到 (c)- 
(d) 它 来 自 (a) 和 (c), 通过 利用 


Elmin(z,T)] = 三 Pp{min(z,7) > #}dt = [ P{T > t}dt 
o 0 


ElsIT =t,N(t) = 可 = { nz 
n, 


并 结合 等 式 E[S] = AE[T]. 
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(e) 因为 到 达 者 的 等 待 时 间 是 直至 下 一 辆 公交 车 到 达 的 时 间 ,前面 的 结果 导致 PASTA 结 
果 , 即 看 到 公交 车 到 达 的 更 新 过 程 的 超额 寿命 小 于 z 的 到 达 者 的 比例 , 等 于 小 于 z 的 时 
间 比 例 . 
49. 将 每 个 到 达 间隔 时 间 想 成 由 n 个 独立 的 相位 组 成 (其 中 每 一 个 是 速率 为 和 的 指数 分 布 ) 并 
且 考 虑 半 马 尔 可 夫 过 程 , 它 在 任意 时 间 的 状态 是 当前 到 达 间 隔 时 间 的 相位 . 因此 , 这 个 半 马 
尔 可 夫 过 程 转移 从 状态 1 到 2 到 3… 到 n 到 1, 如 此 等 等 . 同样 , 呆 在 每 个 状态 的 时 间 有 
相同 的 分 布 .于 是 , 这 个 半 马 尔 可 夫 过 程 的 极限 分 布 是 Pi = 1/n,i = 1,…,n. 为 了 计算 
lim P{Y(t) < z}, 我 们 取 条 件 于 在 时 刻 t 的 相位 , 并 且 注 意 , 如 果 它 是 n 一 + 1, 这 具有 概 
率 1/m, 那么 直到 更 新 发 生 的 时 间 将 是 i 个 指数 相位 的 和 , 于 是 它 将 有 参数 i 和 和 的 伽 马 
分 布 . 
52，(a) 若 T 是 指数 随机 变量 , 则 E[T?]/E[T] = 2E[T]. 因此 
AEIT2]/(2EI7]) = XEIT] = EIN]. 


(b) 因为 对 一 切 时 间 平均 , 我 们 对 长 的 循环 (公交 车 到 达 间 的 时 间 ) 给 了 更 多 的 权重 . 
(0) 因为 公交 车 按 泊 松 过 程 到 达 , 由 PASTA 原则 , 被 一 辆 公交 车 础 到 的 等 待 开 客 平均 数 ， 
等 于 等 竺 有 客 数 对 所 有 时 间 的 平均 . 2 
53. 若 第 站 次 抛 出 正面 , 则 令 X; 二 1, 否则 令 X; = 0, 我 们 想 求 忆 也 | 其 中 是 直 殖 抛 
所 到 模式 出 现 的 次 数 令 g 一 1p 
EIN] = i + E[Nnarn) 
1 1 
= et ElNn] 
和 1 1 
pt pt 
因为 N 是 对 序列 {Xi,i > 1} 的 停 时 , 由 瓦尔 德 方程 推出 


be =EINp= -+ 工 +1 
会 PE pg 
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2. 这 个 问题 可 以 用 M/M/1 排队 建 模 , 其 中 和 = 6, 4 = 8. 平均 价格 率 将 是 
每 个 机 器 每 小 时 10 美元 x 失效 的 机 器 的 平均 台数 


失效 的 机 器 的 平均 台数 正 是 二, 它 可 以 由 方程 (3.2) 计算 ， 
L=-2 =2=3 
-z= 
因此 , 平均 价格 率 = 30 美元 /小 时 . 
6. 为 了 对 M/M/2 计算 W, 建立 平衡 方程 组 
和 Po =AP (每 个 服务 线 具 有 速率 /0) 
Q+WP =AP + 2pPs 
(入 十 21)P =APni+2pPnn, n>2 
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这 些 方程 有 解 已 = (p"/2"!)Po, 其 中 p = 和 /jp. 由 边界 条 件 并 2 Pa = 1 可 得 
Lp P= 
~ 1+p/2 2+p 
现在 我 们 有 了 Pu, 所 以 可 以 计算 L, 从 而 由 工 = 和 AW 计算 W， 
L=Dnp,=pp) (人 =28 Dn (8)" 
“3 "0 n=0 


人 


_o(2 一 P) (ol/2) 
=2(2 二 pj TI 一 p/2F 队友 种 (87) 的 推 别 


4p 四 dpX 
(2+p)(2—p) (21+N(2p—A) 


由 工 = 和 W, 我 们 有 i 
W=W(M/M/2)= 全 + 
由 方程 (8.8)， 具有 服务 速率 24 的 M/M/1 排队 系统 有 


W(M/M/1) = Erp 


-x 
我 们 假定 在 这 个 M/M/1 排队 系统 有 2 > 和 ， 从 而 排队 系统 是 稳定 的 . 但 是 这 样 4 > 
2 十 入 ,从 而 4p/(24 十 入 ) > 1, 它 昔 涵 着 W(M/M/2)> W(M/M/1). 直观 解释 为 , 如 果 有 
人 发 现在 M/M/2 的 情形 队列 闲 着 , 那么 有 两 条 服务 线 并 不 好 , 更 好 的 办 法 是 离开 并 且 进 入 
-条 更 快 的 服务 线 . 现在 令 WS = Wa(M/M/1) 且 W3 = We(M/M/2). 于 是 
Wé = W(M/M/1) — 1/2p, Wé = W(M/M/2) -1 
所 以 入 


1 


We = pO EY 由 方程 (8.8) 


以 及 

入 2 

WE = 一 一 一 一 一 一 一 
kA(2p4 — N24+N) 

于 是 


> We 全 和 < 2 


入 
全 + 
由 于 在 M/M/1 的 稳定 情形 , 我 们 假定 和 < 21, 只 要 是 可 能 比较 的 , 即 只 要 入 < 2k 就 有 
Wé < Wé. 
(a) > 对 nPn/ 和 . 
Ck _ Ti _ A+ia 
(b) eo = Len = II 下 DB 


(0) P{n| 已 接受 服务 的 人 }= eh 


(d) 六 P{nl 已 近 有 邮 和 的 人 ) 
(e) 以 Wals) 和 Wael(n) 分 别 记 队 列 中 已 服务 的 人 和 未 服务 的 人 的 平均 停留 时 间 . 那么 
Dn DP/A=Wo=D enPnWo(s)+(1— DenPn)Wal(n) 


n>0 


‘n>0 
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其 中 We(s) 在 (d) 部 分 中 求 出 , 取 条 件 于 一 个 等 待 者 是 否 接受 了 服务 , 得 到 右边 的 等 
式 . 
11. 若 有 m 个 家 庭 和 m 辆 出 租车 在 等 待 , nm = 0 则 记 为 状态 (J,m). 时 间 可 逆 性 方程 是 


Pr-ioA= Prop, n=1,,N 
Pm-ipy= PomM, m=1,.…,M 


求解 得 到 

Pao= (MW)"Poo, n=0.l,,N 

Pom=(p/N)™ Poo, m=0.1,.…,M 
其 中 1 N M 

而 = EW" 十 ZN 

(a) EN.o Pom 
(b) Exo eh 
(9 ep 
(e) 1 — PN,o. 


当 N = M = co 时 , 时 间 可 逆 性 方程 变 成 
Pn-ioA= Pnolpkt+na), n>1 
Pm-ik = Pom(A+mB), m2>1 


由 它们 推 得 
A 
Hi Roll pr 
Pm = moll Hs ">1 
其 余 和 以 上 过 程 业 似 . 
12. (a) AP = AP 


(A+)P =AP + 2pPs 
(A+24)P =APni+2uPan, n>2 


这 些 是 与 M/M/2 排队 系统 相同 的 平衡 方程 , 并 且 有 解 
_ 2 和 A A 
"atA "ai 


Ph 


(b) 这 个 系统 从 0 以 速率 
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_ XQp—N 


证 2 十 入 


到 1. 这 个 系统 从 2 以 速率 


_ X(N 

ni ey) 

到 1， 
(c) 引进 一 个 新 的 状态 cl 表示 存货 管理 员 自己 在 收 丈 ，Pu 的 平衡 方程 是 
M+WPa=pP 

ee 2 eo)} 
Atp 24M+p) (24 十 入 ) 
最 后 , 存货 管理 员 在 收 款 的 时 间 的 比例 是 


Pu = nh 


2》2 


Put P=Pat ir- 


n=2 
21. (a) MPio. 
(b) Aa(Po + Pio). 
(ce) MAPio/[MiPio + Xa(P + Pio)]. 
(d) 这 等 于 服务 线 2 的 顾客 是 类 型 1 的 比例 乘 以 服务 线 2 在 忙 的 时 间 比 例 ， (这 是 正确 
的 ， 由 于 服务 线 2 服务 于 一 个 顾客 的 时 间 数 量 并 不 依赖 他 是 哪 一 类 型 的 顾客 )， 于 
是 由 (c) 知 , 答案 是 
(Py + Pi)APo 
MPio + M2(Po + Pio) 
24. 现在 的 状态 是 n(n > 0) 和 n(n' > 1), 其 中 当 系统 中 有 n 人 而 没有 损坏 时 , 状态 是 n, 当 在 
系统 中 有 n 人 而 处 于 有 一 个 损坏 时 状态 是 nv. 平衡 方程 组 是 


AP =AP 
(A+A+aPs =AP +HPi+BPw，m>1l 
(B+ NP =aP 
(B+ NP =aPn +APn_1y, n>22 


oo 
DP+D P=1 
es 


n=0 
利用 上 式 的 解 ， 
工 = > n(P + Pw) 


n=1 


从 而 
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28. 如 果 在 一 个 顾客 离开 时 系统 忙 着 , 则 直到 下 一 个 人 离开 的 时 间 是 一 个 服务 的 时 间 . 如 果 在 一 
个 顾客 离开 时 系统 闲 着 , 则 直到 下 一 个 人 离开 的 时 间 是 直至 下 一 个 到 达 者 的 时 间 加 上 一 个 


服务 的 时 间 . 
用 矩 母 函 数 , 我 们 得 到 


leeo = 人 Ele?| 系 统 楷 ] + (1 一 人) PI2 | 系 统 并 


入 


-=(2 


k 


pk 
A—s 


) (7S) 


+ 人 本 2) Ele’*+)] 
及 


其 中 X 具有 到 达 间隔 时 间 的 分 布 , Y 具有 服务 时 间 的 分 布 , 而 且 X 和 Y 独立 . 于 是 


Ele’*+Y)] =Ele*xesY] 


= 了 Ele"x)]EleY] 


所 以 


由 独立 性 


入 入 kh 入 


as 


由 矩 母 函 数 的 唯一 性 推出 , 刀 具有 参数 为 和 


2) (3 


的 指数 分 布 . 


) (二 ) 


一 8 一 8 A-—s 


36， 对 于 所 有 的 3 种 规定 , 队列 的 长 度 与 忙 期 的 分 布 都 是 一 样 的 , 等 待 时 间 的 分 布 是 不 同 的 . 然 


而 , 均值 是 相同 的 . 因为 所 有 的 工 是 相同 的 ， 


所 以 这 可 由 W = L/ 和 看 出 . 等 待 时 间 的 最 小 


方差 发 生 在 先 来 先 服务 , 而 最 大 方差 发 生 在 后 来 先 服务 . 
39，(a) 由 于 泊 松 到 达 ao = Po， 假 定 在 服务 中 的 每 一 个 顾客 单位 时 间 付 出 1, 方程 (8.1) 的 


价格 恒等式 说 明 
平均 在 服务 的 人 数 = 和 AE[S] 
所 以 
1— Po = AE[S] 
(b) 由 于 ao 是 具有 分 布 G 的 到 达 者 的 比例 , 而 1 - ao 是 具有 分 布 G2 的 到 达 者 的 比 
例 , 随 之 导出 结果 . 
(c) 我 们 有 El] 
Po = Bl]+ BIH] 
和 了 人 II] = 1/ 和 ,于 是 i 半 
到 下 三 十 和 3 
现在 从 (a) 和 (b) 可 知 , 我 们 有 
El[S] = (1 — AE[S])E[S1] + AE[S]E[S2] 
外 E[Si] 
FS] = T+ XEIS'] + ETS] 
代入 E[B] = E[S]/(1 - AE[S]), 现在 导出 结果 . 
(d) ao = 1/E[C], 蕴涵 
E[S1] + 1/ 和 A — El[S] 


ElC] = 


1/\— ElS2] 
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45. 注意 在 一 次 服务 期 间 任意 的 暂停 都 是 这 次 服务 的 一 部 分 , 我 们 看 到 这 是 一 个 M/G/1 模型 . 
我 们 需要 计算 服务 时 间 的 前 两 个 矩 . 现在 , 一 次 服务 时 间 是 T 直至 发 生 某 事 (或 者 一 个 服 
务 完 成 , 或 者 暂停 ) 加 上 的 任意 附加 时 间 A. 于 是 


E[S] = EIT + A] = E[T] + E[A] 
为 了 计算 E[4], 我 们 取 条 件 于 发 生 的 事件 是 一 次 服务 , 还 是 一 次 暂停. 它 给 出 
El4] = 


:0 


因为 E[T] = 二 二 去 ,所 以 我 们 得 到 


1 
El = + (8 也 Els)) 


从 而 $ 
E[S] = 二 


Ele 


我 们 也 需要 ES?], 其 如 下 得 到 ， 
ElS?] =E[(T + 4)?] = E[T*] + 2E[AT] + E[A?] = PIT?] +2EI4]EIT] + EL43] 


4 和 了 的 独立 性 是 由 于 首次 发 生 的 事件 的 时 间 , 独立 于 发 生 的 是 一 次 服务 还 是 一 次 暂停 . 
现在 
EL4?3] = EL42| 暂 停 | 一 < 


te rE 


E[( 暂 停 时 间 + S")9] 
]} 


HA+a 


ee 


因此 
E[S?] = 


i ?m05+ Ca 


a 2 2 
+ 人 (六 + 人 + 遍 ]+a} 
现在 求解 ELS?]. 所 要 的 解答 是 
和 AE[S?] 
2(1— AE[S]) 
在 上 面 , S” 是 在 暂停 结束 后 的 附加 服务 , 并 且 S” 与 S 有 相同 的 分 布 . 上 面 也 用 了 指数 随 
机 变量 平方 的 期 望 是 期 望 平方 的 两 倍 这 个 事实 . 
计算 3 的 矩 的 另 一 种 方法 是 用 表示 式 


Wo = 
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47. 
52. 


N 
S=D (T+Bi)+Twr 
气 
其 中 N 是 一 个 顾客 在 服务 中 的 暂停 次 数 , T; 是 从 当 第 i 次 服务 开始 时 直到 一 个 事件 发 生 
的 时 间 , 而 Bi 是 第 i 次 暂停 的 长 度 . 现在 我 们 用 这 个 事实 , 即 对 于 给 定 N, 在 这 个 表示 式 
中 所 有 的 随机 变量 都 是 独立 的 指数 随机 变量 , T; 具有 速率 /十 a 且 Bi 具有 速率 8. 这 就 
推出 


二 ty N 
EISIN = Ta + 万 Var(SIN) = 坟 二 jz+ 砚 
所 以 , 由 于 1 + N 是 均值 (J 十 a)/4 (和 方差 (Ap 十 a)/j2) 的 几何 随机 变量 , 我 们 得 到 
和 a 
Bls|=+ 遍 


而 且 , 用 条 件 方差 公式 ， 


1 站 2 1 a 


vs) = [e+ pe +t jta) + pa 


由 等 式 了 工 = XaW 可 得 L = 0.8 x 4= 3.2. 
Sn 是 第 n 个 顾客 的 服务 时 间 , T 是 第 n 个 顾客 和 是 第 n+ 1 个 顾客 到 达 之 间 的 时 间 . 
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4. 


12. 


17. 


22. 


(8) $2) = zi max(z2, 23, x4)zs. 
(b) (7) = zl max(T274, T3Ts)T6. 
(c) %(z) = max(z1, T7273)74. 


,一 个 最 小 切割 集 必须 至 少 包含 每 个 最 小 道路 集 的 一 个 分 最 、 有 6 个 最 小 切割 集 : {1, 5}， 


{1,6}, {2, 5}, {2, 3,6}, {3, 4,6}, {4, 5}. 
最 小 道路 集 是 ; {1, 4}, {1,5}, {2,4}, {2,5}, {3,4}, {3,5}. 记 qi = 1 一 ps, 可 僻 性 函数 是 


7(p) = P{ 或 者 1, 或 者 2, 或 者 3 运行 }P{ 或 者 4, 或 者 5 运行 } = (1 一 q19293)(1 一 qqs) 


E[IN?] = EIN?IN > OJP{N > 0} 

> (EININ > 0])?P{N >0} 由 于 E[X?] > (E[X])’ 
于 是 

BIN?]JP{N > 0} > (EININ > OJP{N > 0))* = (EIN])* 

以 NN 记 其 所 有 的 部 件 都 运行 的 最 小 道路 集 的 个 数 . 那么 r(p)= P{N > 0}. 类 似 地 , 如 果 
我 们 定义 NN 为 其 所 有 部 件 都 失效 的 最 小 切割 集 的 个 数 , 那么 1 一 r(p)= P{N > 0}. 在 两 
种 情形 , 我 们 可 以 通过 将 N 表示 为 示 性 ( 即 伯 努 利 ) 随机 变量 的 和 来 计算 E[N] 和 ELN?] 
的 表达 式 . 然后 我 们 可 以 用 不 等 式 导出 r(p) 的 界 . 


(a) Fi(a) =P{X >t+alX > 里 = | 2 te 


(b) 假设 A(t) 递增 , 回忆 
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Fl er asade 
i =exp 仁 | (as} 


它 关于 上 递减 , 因为 和 (t) 递增 ， 为 了 进行 另 一 种 方法 ,假设 十 a)/Flt) 对 t 递 
减 . 现在 当 a 很 小 时 


因此 


Flt+0) ea 
FW) 
因此 , e-**9 必须 对 上 递减, 从 而 和 (t) 递增 . 
25. 对 于 z > &, 由 于 IFRA, 所 以 
1-p=F(é) = F(z(é/z)) > [F(z)]* 


因此 F(z) < (1 一 Pr = ee7. 
对 于 rz 和 6, 由 于 IFRA, 所 以 
F(z) = F(é(z/8)) > 区/ 


因此 F(z) > (1 一 Pr 一 e 
30，r(P) = Pipaps + pip2p4 十 PiPspa + Pp2ap3ps 一 3P1P2P3P4 
2(1 —t)?(1— /2) +2(1—t)(1—t/2)? 
r(1— F(t))= 4 —3(1—t)?(1—t/2)?, 0<t<1l 
0， 1gtg2 


了 [寿命 = = je- t)? (和 +0-9( 和 -0- 闻 (和 |= 蜂 
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1. B(s) + B(t) = 2B(s) + B(t) - B(s). 现在 , 2B(s) 是 均值 为 0 且 方 差 为 4s 的 正 态 随机 变 
基 , 而 B(t) - B(s) 是 均值 为 0 且 方 差 为 t 一 s 的 正 态 随机 变量 . 因为 B(s) 和 B(t)- B(s) 
独立 , 由 此 推出 B(s) + B(t) 是 均值 为 0 和 方差 为 4s + 上 一 s = 3s +t 的 正 态 随机 变量 . 

3. ElB(t1)B(t2)B(t3)] = E[EL[B(t1)B(t2)B(t3)|B(t), B(t2)]] 

= E[B(t1)B(t2)E[B(t3)|B(t), B(t2)]] 

= E[B(t1)B(t2)B(t2)] 

= E[E[B(t1)B?(t2)|B(t))]] 

= E[B(t1)ELB?(t2)|B(t)]] 

= ElB(H){(t2 —t1) + B?(t1)}] (*) 

=E[lB(t)] + (tz —t1)E[B(t)] 

=0 
其 中 等 式 (+) 得 自 , 由 于 对 于 给 定 的 B(t1), B(t2) 是 均值 为 B(t1) 且 方差 为 tz 一刀 的 正 
态 随机 变量 . 同时 E[B3(t)] = 0, 因为 B(t) 的 均值 为 0. 
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5. P{T < T_1 < Tz} = P{ 在 击 中 2 前 击 中 一 1, 在 击 中 一 1 前 击 中 1} 


=P{ 击 中 1 在 -1 前 }xP{ 击 中 -1 在 2 前 | 击 中 1 在 一 1 前 } 
=3P{ 在 上 升 1 前 下 降 2} 
| 和 


倒数 第 二 个 等 式 是 由 于 看 布朗 运动 何 时 首先 击 中 1. 

10. (a) 写 下 X(b = X(s) + X(b) - X(s), 并 且 利用 独立 增 最 性 , 我 们 看 到 , 给 定 X(s) = <， 
X(t) 与 c 十 X(t) - X(s) 一 样 地 分 布 ， 由 平稳 增 基 性 , 它 与 c+ X(t 一 s) 同 分 布 , 从 
而 是 均值 为 c 十 J(t 一 s) 且 方差 为 (t 一 s)o? 的 正 态 随机 变量 . 

(b) 用 表示 式 X(t) = oB(t) + pt, 其 中 {B(t)} 是 标准 布朗 运动 ， 利 用 方程 (10.4), 但 
是 将 s 与 上 互 换 , 我 们 看 到 , 给 定 B(s) = (c 一 Js)/o 时 ， B(t) 的 条 件 分 布 是 均值 为 
t(c 一 Js)/(os) 且 方 差 为 t(s 一 t)/s 的 正 态 分 布 . 于 是 , 给 定 X(s) = c,s > t 时 , X(t) 


的 条 件 分 布 是 均值 为 
[和 各 | Fe = 区 上 F 记 
Et ot(s—t) 
5 
的 正 态 分 布 . 


19. 由 于 知道 Y(t) 的 值 等 价 于 知道 B(t), 所 以 我 们 有 
ElY (IY (uw),0<u<s] =e-" ?Ele’®)|B(W),0 < u < gj 一 eeW2Eles8(o)|B(s)] 
现在 , 给 定 B(s), B(t) 的 条 件 分 布 是 均值 为 B(s) 且 方 差 为 + 一 s 的 正 态 分 布 . 利用 正 态 随 
机 变量 的 矩 母 函数 公式 , 我 们 看 到 
erc?w2E[esB(o|B(s]] = @-t/2ecB()+(t-s)e?/2 ~ ee/2ecBt) = Y(8) 
于 是 {Y(t)} 是 一 个 园 
ElY()] = ElY(0)] =1 


20. 由 轶 停止 定理 ， 
EIB(T)] = ELB(0)] =0 


然而 , B(T) = 2 一 47, 所 以 2 一 4E[T] = 0, 从 而 E[T] = 也 
24. 由 鞠 停 止 定理 和 习题 18 的 结果 推出 
E[B*(T)—T]=0 
其 中 T 是 在 这 个 问题 中 给 出 的 停 时 , 且 


BO 二 2 的 = 
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所 以 
[5 四 -可 -。 


然而 , X(T) = z, 从 而 上 式 给 出 
El(z -AT)3 = o?EI[T] 
但 是 , 由 习题 21, E[T] = z//u 从 而 上 式 等 价 于 1 


了 
VarwmD = 从 而 Var(T) = 高 


25， 将 过 程 在 时 刻 上 的 值 记 为 a(t). 若 第 i 次 改变 是 递增 , 则 令 [= 1, 是 递减 则 令 I; = 一 1， 


于 是 
[AI 


Xalt)=oVA DE 


i=1 


因为 有 是 独立 的 , 显然 此 过 程 具有 独立 增 基 , 而 且 当 A 一 0 时 极限 过 程 具有 平稳 增 其 . 再 
则 , 由 中 心 极限 定理 可 知 , 显然 Xa (t) 的 极限 分 布 是 正 态 分 布 . 现在 , 结果 得 自 


ElXa(t)] =oVAL/Al(2p —1) 
= pAlt/A] = pt 


Var(Xa(D) = 0°ALt/Al(1 ~ (2p — 1)°) 
— ot 

其 中 前 面 的 等 号 由 当 A 一 0 时 p 一 1/2 得 来 

26. 对 M(t) = maxocvst X(y) 有 
P{T, < %0} = limP{M(t) > Y} 
结果 得 自 推论 10.1, 因为 ims 8(s) = 0 和 lim 一 = 8(-s) = 1. 因此 ,对 六 < 0 有 
PIM 2)} =limP{M(O) > vy} = 

27. 利用 { 一 X(y),y > 0} 是 漂移 参数 为 一 J 和 方差 参数 为 o? 的 布朗 运动 , 对 s < 0, 我 们 由 推 

论 10.1 得 到 


P{omin, X(y) < s} = P{ ag, -X(y) > —s} 


osyst 
2op/o2® Ea) 总 (3) 
=@ Dd sy BA Dd 
( ovt ovt 


30. E[X(a2t)/a] = (I/aJEIX(a2b] =0. 对 于 s<t 
Cov(Y(s), Y(t)) = 让 Cov(X(a?s), X(a20) 
1 a 
= 
a 


因为 {Y(t)} 显然 是 高 斯 过 程 , 所 以 结论 得 证 . 
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33，(a) 泊 松 过 程 从 任意 时 刻 t 开始 仍旧 保持 为 一 个 速率 的 泊 松 过 程 . 
(b) E[Y(t)Y (t+ s)] = | E[Y (OY(t+ s)|Y(t) = ye "vdy 


-| yE[Y (t+ s)|Y(t) = ye dy+ | yly — s)Ae- say 
i i 


可 
=| yiXe vay +| 3(y 一 s)Xe vdy 


其 中 前 式 用 了 E “ 
_y 
Bpr(yGt+aly 的 = 可 = | t= 着 y<a . 
y(y — s), 车 y>s 
因此 
Cov(Y(t),Y (t+ s)) = 上 ye ydy 十 | 2 一 ?Xe dy — 二 
第 11 章 


1. (a) 令 U 是 一 个 随机 数 ， 若 邢 ;-1 万 < U < 并)-; 万 , 则 从 Fi 模拟 ，( 在 上 式 中 , 当 
i=1 时 , D1 P; =0.) 
(b) 注意 . 
F(z) = 3F(2) + 5P() 
sh Fi(z)=1-e”, 0<z<o0 
po ER be 0<z<1 
人 下 亲本 区 
因此 , 用 (a) 中 结果 , 令 U1,U2,Us 是 随机 数 , 并 且 置 


和 车 本 < 了 
X= 


1 
Us, 项 >3 


以 上 用 了 二 号 下 是 速率 为 2 的 指数 随机 变革 . 


3. 如 果 从 其 中 有 N 个 可 接受 的 N + M 个 产品 中 , 选取 了 容量 为 n 的 随机 样本 , 那么 在 样本 
中 的 可 接受 的 产品 的 个 数 X 使 得 


Wl DA 


为 了 模拟 X, 注意 如 果 


工 二】 1 如 果 第 7 次 选取 的 是 可 接受 的 
” 0， 其 他 情形 


P{B =1h,…, 1}= 
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因此 , 我 们 可 以 通过 生成 随机 数 号 ,… ,Un 来 模拟 卫 ,…, In, 然后 置 


N ~ Dit 
入 二 淹 是 册 < 丰 二 日 = 可 
0， 其 他 情形 
则 X = 于 ,万 具有 要 求 的 分 布 . 
另 一 个 方法 是 令 
{ 1 如 果 第 了 个 可 接受 的 产品 在 样本 中 
” 【0， 其 他 情形 
然后 通过 生成 随机 数 U1，,… ,Uw 来 模拟 XX!1,… ,XN, 然后 置 
n— Pl} xX 
为 =」 1 姑 果 上 < 万 +M 证- 可 
0， 其 他 情形 


则 X = 玫 儿 ,Xi 具有 要 求 的 分 布 . 
当 n < N 时 前 一 个 方法 更 可 取 , 而 当 N < n 时 后 一 个 方法 更 可 取 
6. 令 
本 fl) 1 2 一 z2 ce 入 
-m=- 幸 [wr{ 生 +- 二 {] 


因此 


2 
二 < 芭 vamep 信 } E > 志 
因此 , 当 入 = 1 时 (d/dA)c(A) = 0, 而 且 容易 验证 它 达 到 了 c(A) 的 最 小 值 . 
16. (a) 可 以 以 依次 定义 它们 的 方式 同样 地 模拟 它们 . 就 是 说 , 首先 生成 随机 变量 i 使 
P{ = 计 = 二 起 


Ds wy 
然后 , 如 果 五 = 上 , 则 生成 12 的 值 , 其 中 
P{h=i}= EE , i#k 
> 


t= Nn 


I#k 


如 此 等 等 .然而 , 在 部 分 (b) 给 出 的 方法 更 为 有 效 . 
人 以 石 记 第 了 个 最 小 的 Xi 的 下 标 
23. 令 mb) = | Ma)ds 并 且 令 m-Mb) 是 它 的 反 务 数 即 mtm-1D) = 
@) Plm(0) se} = P00 > 
=P{N(m-!(z)) =0} 
= e-m(m (z)) 


一 ez 
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(b) P{m(Xi) —m(Xi1) > zim(X1),, m(Xi1) — m(Xi2)} 


=P{m(Xi) — m(Xi1) > z|X1,., Xs} 
=P{m(Xi) —m(Xi_1) > z|Xi-1} 
=P{m(Xi) —m(Xi1) > ziIm(Xi-1)} 


现在 
P{m(Xi) —m(Xi-1) > zIXi-1 =Y)} 


=P 位 Xt)dt > zlXi1 = 中 
， 
=POG > dX = EM MOdt== 


=P{N(o — N(y) = 0|Xi-1 =Y} 
=P{N( — N(y) = 0} 


= exp { = [ 2at} 
一 e-z 


32. Var((X +Y)/2) = IlVar(X) + Var(Y) + 2Cov(X,Y)] = 
现在 


Var(X) + Cov(X,Y) 
2 


Cov(V, W) <1 
VVartV Var(W) 
总 是 正确 的 , 从 而 当 X 和 Y 有 相同 的 分 布 时 Cov(X,Y) < Var(X). 


鞍 的 停 时 , 536 
远 停 止 定理 , 536 

B 
B 密度 , 48 
Bose-Einstein 分 布 , 119 
白 噪 声 ，526 
白 噪声 变换 ，526 
马尔 可 夫 过 程 , 370 
邦 费 罗 尼 不 等 式 , 12 
保险 破产 问题 , 386 
贝 叶 斯 公式 , 10 
标准 的 布朗 运动 ,507 
别名 (alias) 方法 , 561 
别名 方法 , 559 
并 , 2 
并 联 , 467 
波 拉 泽 克 - 欣 齐 内 公式 , 435 
波 利 亚 坛子 模型 ，118 
伯 努 利 随机 变量 ，21 
伯 努 利 随 机 变量 的 期 望 ,30 
泊 松 范例 , 53 
泊 松 复合 分 布 , 132 
泊 松 随机 变量 ,24 
泊 松 随机 变量 的 期 望 ,30 
博克 斯 - 马 勒 方法 ,551 
博 斯 - 爱 因 斯 坦 分 布 , 120 
不 带 左 跳 的 随机 徘徊 ,125 
不 可 能 事件 , 3 
布尔 不 等 式 , 13 


布莱克 -斯 科 尔 斯 期 权 定 价 公式 , 516 
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布朗 桥 , 527 
布朗 运动 过 程 , 507 
C 
C-K 方程 , 153 
常 返 态 , 162, 163 
超 几 何 分 布 , 77 
串联 , 467 
串联 系统 , 426 
串 行 排队 系统 , 335 
纯 生 过 程 , 297, 300 
次 序 统计 量 , 46 
D 
带 有 暂缓 行为 的 串联 模型 ，498 
单纯 形 法 ，212 
倒 逆 链 ， 323 
道路 向 量 , 469 
概率 , 3 
狄 利克 雷 分 布 , 118 
递减 失败 率 , 486 
递增 失败 率 , 486 
算法 有 效 性 的 一 个 模型 ，186 
独立 泊 松 随机 变量 的 和 , 45 
独立 事件 , 8 
独立 随机 变量 , 38 
独立 正 态 随机 变量 的 和 ， 52 
赌 徒 破产 问题 , 183 
对 称 随机 游 动 , 165, 506 
对 立 事件 , 3 
对 偶 变 量 , 571 
对 偶 变量 的 应 用 ，571 
多 项 分 布 , 68 
多 元 正 态 分 布 , 53, 54 


E 

厄 兰 的 损失 公式 , 454 

厄 兰 损 失 系 统 , 454 

二 阶 平稳 , 530 

二 阶 平稳 过 程 , 530 

二 项 分 布 的 正 态 近 似 , 62 

二 项 复合 分 布 , 133 

二 项 随机 变量 , 21, 22 

二 项 随机 变量 的 方差 ,42 

二 项 随机 变量 的 期 望 , 30 
F 

反馈 , 429 

方差 缩减 技术 , 570 

分 布 函数 ， 19 

分 布 , 116 

分 量 , 480 

分 支 过 程 , 195 

风险 函数 , 489 

封闭 系统 , 429 

冯 ， 诺 伊 瘟 算 法 , 554 

负 二 项 分 布 , 68 

复合 泊 松 随机 变 基 , 92 

复合 随机 变量 , 83, 130 

复合 随机 变量 的 方差 , 92 

复合 随机 变量 恒等式 , 130 
G 

G/M/1 模型 , 446 

G/M/k 排队 系统 , 454 

伽 马 分 布 ,455, 486 

伽 马 函数 ,28 

匣 马 随机 变量 , 27 

概率 算法 , 192 

概率 密度 函数 , 25 

概率 质量 函数 , 20 

高 斯 过 程 , 526 

更 新 方程 , 343 

更 新 过 程 , 340 


更 新 过 程 的 平均 超额 寿命 , 360 


更 新 过 程 的 平均 年 龄 , 359 
更 新 过 程 的 速率 , 345 
更 新 函数 , 343 
更 新 连贯 , 384 
功率 谱 密 度 , 534 
股票 期 权 的 定价 , 512 
广义 更 新 过 程 , 377 
过 程 的 滑动 平均 , 532 
过 去 稿 合 法 ，583, 585 
H 
黑 斯 廷 斯 - 梅 特 罗 波 利 斯 算法 ，207 
互 不 相 容 , 3 
混合 分 布 ， 130 
J 
积分 布朗 运动 , 528 
基本 更 新 定理 , 347 
吉 布 斯 抽样 , 208 
极限 或 长 程 概率 , 403 
极限 有 效 度 , 496 
极 坐标 方法 ，552 
几何 布朗 运动 , 511 
几何 分 布 的 均值 , 84 
几何 随机 变量 ,24 
几何 随机 变量 的 方差 , 91 
几何 随机 变量 的 期 望 , 30 
减弱 算法 , 564 
交 , 2 
交替 更 新 过 程 , 365 
结构 函数 , 467 
和 矩 母 函数 , 48 
拒绝 法 , 544 
卷 积 , 44 
均匀 随机 变量 ,26 
均匀 随机 变量 的 期 望 , 31 
均匀 先 验 、 波 利 亚 坛子 模型 和 博 斯 - 爱 因 斯 
坦 分 布 , 116 
均值 , 33 
均值 函数 , 343 
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K 
上 记录 值 , 123 
上 记录 指标 , 124 
卡 方 随机 变量 , 55 
开放 系统 , 426, 429 
科 尔 莫 戈 罗 夫 向 后 方程 , 307 
科 尔 莫 威 罗 夫 向 前 方程 , 309 
可 达 状 态 , 160 
可 靠 度 , 473 
可 靠 性 函数 ,473 
可 满足 性 问题 , 191 

L 
拉 普 拉 斯 变换 ，53 
累积 分 布 函数 ，19 
离散 风险 率 法 , 588 
离散 风险 率 函 数 , 588 
离散 拒绝 法 , 588 
离散 时 间 , 65 
离散 随机 变 基 , 20 
离散 随机 变量 的 不 记 录 值 , 123 
利 特 尔 , 403 
连续 时 间 的 马尔 可 夫 链 , 297 
连续 随机 变量 , 25 
联合 地 连续 , 35 
联合 分 布 的 随机 变量 ，35 
联合 分 布 函数 35 
联合 概率 密度 函数 ，35 
联合 概率 质量 函数 ,35 
联合 累积 概率 分 布 函数 ,35 


两 个 独立 的 均匀 随机 变量 的 和 , 44 


M 
M/G/1 的 变形 , 437 
M/G/k 排队 系统 , 456 
M/M/k 排队 系统 , 454 
马尔 可 夫 不 等 式 , 59 
马尔 可 夫 决策 过 程 ,209 
马尔 可 夫 链 , 150 
马尔 可 夫 链 蒙特 卡 罗 方法 , 206 


脉冲 响应 函数 , 533 
蒙特 卡 罗 方 法 , 206 
蒙特 卡 罗 模拟 方法 , 539 
模拟 , 539 
模式 , 120 

N 
逆 变 换 方法 ，543 

2 
漂移 布朗 运动 , 510 
平衡 方程 组 , 407 
平衡 分 布 , 368 
平均 递增 失效 分 布 , 489 
平均 递增 失效 率 , 467 
平均 值 分 析 , 432 
平稳 概率 , 175 
平稳 过 程 , 529 

Q 
区 入 链 , 316 
强大 数 定律 , 61 
桥 联系 统 , 471 
切 比 雪夫 不 等 式 , 60 
切割 向 量 , 471 
倾斜 密度 , 580 

R 
容 斥 方法 , 476 
容 斥 恒等式 , 5 
容 斥 界 , 478 
弱 平稳 过 程 , 530 
生成 树 , 481 
生 灭 过 程 , 299 
生 灭 模型 , 297 
生 灭 排队 模型 , 416 
时 间 可 逆 的 马尔 可 夫 链 ，198 
时 间 可 逆 性 , 316 
示 性 , 18 
事件 , 2, 3 
瞬时 转移 率 , 306 


索引 


随机 变量 , 17 

随机 变量 的 函数 的 联合 概率 分 布 , 46 
随机 变量 的 函数 的 期 望 , 32 

随机 变量 的 期 望 ,29 
随机 电报 信号 过 程 , 529 

随机 过 程 , 65 

随机 徘徊 过 程 ，352 

随机 数 表 , 539 

随机 投 点 法 , 591 

随机 图 , 111 


套利 , 513 
套利 定理 , 514 
条 件 方差 公式 , 92 
条 件 概率 , 5 
停 时 , 548 
通过 取 条 件 计算 方差 , 91 
通过 取 条 件 计 算 概率 , 94 
w 
韦 布尔 分 布 , 486 
维 纳 过 程 , 507 
维特 比 算法 , 218 
稳 态 概率 , 403 
xX 
吸收 态 , 152 
系统 的 可 靠 度 , 473 
现 值 , 512 
向 后 方法 , 215 
向 前 方法 , 215 
协 方差 与 随机 变量 和 的 方差 , 39 
序 贯 排队 系统 , 335 
序 贯 系统 , 426 
循环 , 355 
延迟 更 新 过 程 , 377 
样本 方差 , 54 
样本 均值 , 41 


样本 空间 , 1 

一 个 m/G/1 优化 的 例子 , 441 
一 阶 自 回归 过 程 , 531 

一 阶 矩 , 33 

伊 格 纳 托 夫 定理 , 103, 123 

隐 马 尔 可 夫 链 模型 , 213 
优先 排队 模型 , 438 

尤 尔 过 程 , 300 

有 随机 容量 的 批 攻 到 达 的 M/G/1, 437 
有 限 源 模型 , 450 

有 效 度 , 495 


再 生 过 程 , 362 

暂 态 , 162 

占 位 时 间 , 329 

折扣 因子 , 139 

正 态 过 程 , 526 

正 态 随机 变 基 , 28 

正 态 随机 变 二 的 方差 , 34 
正 态 随机 变 二 的 期 望 , 31 
指数 模型 , 406 

指标 集 , 65 

指数 随机 变量 ,27 
指数 随机 变量 的 期 望 ,31 
种 子 , 540 

重要 抽样 , 579 

中 心 极限 定理 , 61 

注 , 4 

转移 概率 , 304 

状态 空间 , 65 

状态 向 量 , 467 
最 佳 奖 问题 , 97 
最 小 道路 集 , 469 

最 小 道路 向 量 , 469 
最 小 切割 集 , 471 

最 小 切割 向 量 , 471 


“本 书 一 大 特色 是 实例 丰富 ， 内 容 涉 及 多 个 学 科 ， 尤 其 是 精算 学 …… 
相信 任何 有 上 进 心 的 读者 都 会 对 此 爱不释手 。” 
Jean LeMaire， 宾 夕 法 尼 亚 大 学 沃 顿 商学 院 
“ 书 中 的 例子 和 习题 非常 出 色 ， 作 者 不 仅 提供 了 非常 基本 的 例子 ， 以 
阐述 基础 概念 和 公式 ， 还 从 尽 可 能 多 的 学 科 中 提炼 出 许多 较 高 级 的 实例 ， 
极 具 参 考 价值 。” 
一 一 Matt Carlton， 加 州 州立 理工 大 学 ( Cal Poly ) 


本 书 是 国际 知名 统计 学 家 Sheldon M. Ross 所 著 的 关于 基础 概率 理论 和 随机 过 
程 的 经 典 教材 ， 被 加 州 大 学 伯克利 分 校 、 哥 伦比 亚 大 学 、 普 度 大 学 、 密 鞭 根 大 
学 、 俄 勒 风 州 立 大 学 、 华 盛 顿 大 学 等 众多 国外 知名 大 学 所 采用 。 

与 其 他 随机 过 程 教材 相 比 ， 本 书 非常 强调 实践 性 ， 内 含 极其 丰富 的 例子 和 习 
题 ， 涵 盖 了 众多 学 科 的 各 种 应 用 。 作 者 富 于 启发 而 又 不 失 严密 性 的 叙述 方式 ， 有 
助 于 使 读者 建立 概率 思维 方式 ， 培 养 对 概率 理论 、 随 机 过 程 的 直观 感觉 。 对 那些 
需要 将 概率 理论 应 用 于 精算 学 、 计 算 机 科学 、 管 理学 和 社会 科学 的 读者 而 言 ， 本 
书 是 一 本 极 好 的 教材 或 参考 书 

第 11 版 新 增 大 量 例子 和 习题 ， 还 对 连续 时 间 的 马尔 可 夫 链 、 漂 移 布朗 运动 等 
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